Database Engineering for Backend & AI Engineers
Trang chủ / Module 5
🛠️ Module 5 / 14 · 1-2 tuần

Database Administration Thực Chiến

Backup/restore đúng cách, connection pooling, và các tham số cấu hình quan trọng nhất để database không sập dưới tải thật.

BackupConnection PoolTuning
📌 Vì sao module này quan trọng

Rất nhiều sự cố production nghiêm trọng nhất không phải do bug logic mà do vận hành database sai: backup chưa từng được thử restore, connection pool bị cạn kiệt khiến cả hệ thống treo, hoặc cấu hình mặc định không phù hợp với tải thực tế. Đây là những kỹ năng "phòng cháy" bắt buộc trước khi đưa bất kỳ database nào lên production — bổ sung trực tiếp cho phần container hoá database ở khoá Docker.

🎯 Mục tiêu học tập

  • Thiết lập chiến lược backup đúng (full + incremental/WAL) và kiểm chứng bằng restore thật
  • Giải thích tại sao connection pooling bắt buộc và cấu hình đúng kích thước pool
  • Nhận diện và điều chỉnh các tham số cấu hình ảnh hưởng lớn nhất đến hiệu năng
  • Thiết lập giám sát cơ bản để phát hiện sự cố trước khi người dùng báo lỗi

Backup — vô nghĩa nếu chưa từng thử restore

Nguyên tắc số một: một bản backup chưa từng được restore thử không phải là backup, mà là một file chưa được kiểm chứng. Có 2 lớp backup nên kết hợp:

  • Logical backup (pg_dump/mysqldump): xuất ra SQL hoặc định dạng riêng, linh hoạt (restore từng bảng, đổi version dễ hơn), nhưng chậm với dữ liệu lớn.
  • Physical backup + WAL archiving (pg_basebackup + continuous archiving): sao chép file vật lý cộng với log giao dịch liên tục, cho phép Point-in-Time Recovery (PITR) — khôi phục về đúng thời điểm trước khi xảy ra sự cố (ví dụ trước khi 1 script xoá nhầm dữ liệu chạy).
# Backup logic đơn giản với pg_dump
pg_dump -Fc mydb > mydb_$(date +%Y%m%d).dump

# Restore để kiểm chứng — LUÔN thử trên môi trường riêng, định kỳ
pg_restore -d mydb_test_restore mydb_20260101.dump

Lên lịch kiểm thử restore định kỳ (hàng tháng/hàng quý) như một quy trình bắt buộc, không phải việc làm "khi rảnh" — đây là điều phân biệt team có backup thật và team chỉ nghĩ là mình có backup.

Connection Pooling — vì sao không kết nối trực tiếp app-to-database

Mỗi kết nối database (đặc biệt PostgreSQL) tốn một tiến trình/thread riêng ở phía server, chiếm bộ nhớ cố định dù không hoạt động (thường 5-10MB/kết nối). Khi app scale ra nhiều instance, mỗi instance mở hàng chục kết nối trực tiếp có thể nhanh chóng vượt quá giới hạn (mặc định PostgreSQL ~100 kết nối), khiến database từ chối kết nối mới — sự cố "database quá tải" phổ biến nhất lại thường là do quá nhiều kết nối nhàn rỗi, không phải do query chậm.

Connection pooler (PgBouncer cho PostgreSQL, ProxySQL cho MySQL) đứng giữa app và database, duy trì một số lượng kết nối thật cố định tới database và chia sẻ chúng cho nhiều kết nối ảo từ app — giảm số kết nối thật xuống rất nhiều lần. Chế độ transaction pooling (tái sử dụng kết nối sau mỗi transaction, không phải sau mỗi phiên) hiệu quả nhất nhưng có ràng buộc: không dùng được các tính năng gắn với session (ví dụ prepared statement session-level, advisory lock giữ qua nhiều transaction).

Các tham số cấu hình ảnh hưởng nhiều nhất (PostgreSQL)

Tham sốÝ nghĩaGợi ý
shared_buffersBộ nhớ cache dữ liệu của PostgreSQL~25% RAM server
work_memBộ nhớ cho mỗi thao tác sort/hash trong 1 queryTăng cẩn thận — nhân với số connection đồng thời
max_connectionsSố kết nối tối đaGiữ thấp (100-200), dùng pooler thay vì tăng số này vô hạn
effective_cache_sizeƯớc lượng bộ nhớ hệ điều hành dành cho cache đĩa~50-75% RAM — giúp planner ước lượng đúng chi phí

Nguyên tắc quan trọng hơn con số cụ thể: không copy-paste cấu hình "tối ưu" từ blog nào đó — mỗi tham số cần điều chỉnh dựa trên RAM thật, pattern tải thật, và đo lại sau khi thay đổi. Bắt đầu từ giá trị mặc định, thay đổi từng tham số một, đo, rồi mới thay tiếp.

🏋️ Bài tập thực hành

Diễn tập thảm hoạ: mất dữ liệu và khôi phục

Thiết lập PostgreSQL trong container (dùng kiến thức từ khoá Docker), bật WAL archiving, tạo backup physical. Cố tình "xoá nhầm" 1 bảng quan trọng bằng DROP TABLE. Thực hiện Point-in-Time Recovery để khôi phục database về đúng thời điểm ngay trước khi lệnh DROP chạy. Sau đó cấu hình PgBouncer trước database, viết 1 script giả lập 200 kết nối đồng thời và so sánh hành vi khi có/không có connection pooler.

📚 Tài nguyên học tập

✅ Tự đánh giá hoàn thành

  • Thực hiện thành công Point-in-Time Recovery trên môi trường thử nghiệm
  • Giải thích được vì sao connection pooling cần thiết ngay cả khi query đã nhanh
  • Cấu hình được PgBouncer ở chế độ transaction pooling
  • Điều chỉnh có căn cứ (không đoán mò) ít nhất 3 tham số cấu hình dựa trên đo lường thực tế