CI/CD sâu — Pipeline Design & Deployment Strategies
Thiết kế pipeline nhiều stage, các chiến lược deployment (rolling/blue-green/canary), và rollback an toàn.
CI/CD đã xuất hiện ở cả 4 khoá học trước nhưng luôn ở mức "đủ dùng cho module đó". Module này đào sâu thành kỹ năng lõi của DevOps Engineer: thiết kế pipeline production-grade và chọn đúng chiến lược deploy theo mức độ rủi ro chấp nhận được của hệ thống.
🎯 Mục tiêu học tập
- Thiết kế pipeline CI/CD nhiều stage: build → test → security scan → deploy staging → deploy production
- So sánh và áp dụng đúng các chiến lược deployment: rolling update, blue-green, canary
- Thiết kế cơ chế rollback nhanh, đáng tin cậy
- Áp dụng nguyên tắc pipeline-as-code cho toàn bộ định nghĩa CI/CD
Thiết kế Pipeline nhiều Stage
# .github/workflows/pipeline.yml (rút gọn, minh hoạ cấu trúc)
name: CI/CD Pipeline
on: [push]
jobs:
build-test:
runs-on: ubuntu-latest
steps:
- uses: actions/checkout@v4
- run: make build
- run: make test
security-scan:
needs: build-test
runs-on: ubuntu-latest
steps:
- run: trivy image my-app:${{ github.sha }}
deploy-staging:
needs: security-scan
runs-on: ubuntu-latest
environment: staging
steps:
- run: ./deploy.sh staging
smoke-test-staging:
needs: deploy-staging
runs-on: ubuntu-latest
steps:
- run: ./smoke_test.sh https://staging.example.com
deploy-production:
needs: smoke-test-staging
runs-on: ubuntu-latest
environment: production # có thể cấu hình yêu cầu phê duyệt thủ công tại đây
steps:
- run: ./deploy.sh production
Mỗi stage là một cổng chặn (gate) — thất bại ở bất kỳ đâu dừng ngay pipeline, không để lỗi lan xuống
production. environment: production trong GitHub Actions cho phép cấu hình yêu cầu phê duyệt
thủ công (required reviewers) chỉ cho bước cuối cùng, cân bằng giữa tốc độ (tự động hoàn toàn cho đến
staging) và kiểm soát (con người xác nhận trước khi chạm production).
Rolling Update — chiến lược mặc định
Thay thế dần từng instance cũ bằng instance mới, giữ dịch vụ luôn khả dụng trong suốt quá trình (không có thời điểm nào 0 instance đang chạy). Đây là chiến lược mặc định của Kubernetes Deployment (Module 6). Rủi ro: trong lúc rolling, cả 2 version cũ và mới cùng chạy song song — cần đảm bảo tương thích ngược (backward compatible), đặc biệt với thay đổi schema database.
Blue-Green Deployment
Duy trì 2 môi trường production giống hệt nhau (Blue đang live, Green là bản mới) — deploy toàn bộ lên Green, test kỹ, rồi chuyển traffic từ Blue sang Green ngay lập tức (đổi load balancer/DNS) thay vì rolling dần. Ưu điểm: rollback tức thì (chuyển traffic ngược lại Blue), không có giai đoạn 2 version chạy song song gây phức tạp. Nhược điểm: cần gấp đôi hạ tầng trong lúc chuyển đổi, tốn kém hơn.
Canary Deployment
Triển khai version mới cho một phần nhỏ traffic thật (ví dụ 5%) trước, giám sát chặt metric (lỗi, latency — Module 7), rồi tăng dần tỉ lệ nếu ổn định, hoặc rollback ngay nếu phát hiện vấn đề. Đây là chiến lược an toàn nhất cho thay đổi rủi ro cao, nhưng phức tạp nhất để triển khai đúng — cần công cụ hỗ trợ định tuyến traffic theo tỉ lệ (service mesh, hoặc tính năng traffic splitting của Ingress Controller/Kubernetes — Module 6) và observability đủ tốt để phát hiện vấn đề sớm ở quy mô nhỏ.
| Chiến lược | Tốc độ rollback | Chi phí hạ tầng | Độ phức tạp |
|---|---|---|---|
| Rolling | Trung bình | Thấp | Thấp |
| Blue-Green | Rất nhanh | Cao (gấp đôi tạm thời) | Trung bình |
| Canary | Nhanh, rủi ro thấp nhất | Trung bình | Cao |
Rollback an toàn — luôn có kế hoạch B
Nguyên tắc bắt buộc: mọi deploy phải có kế hoạch rollback rõ ràng trước khi thực hiện, không phải nghĩ ra khi sự cố đã xảy ra. Với container/Kubernetes, rollback thường đơn giản (quay lại image tag trước đó — liên hệ Module 9 khoá Docker về chiến lược tag), nhưng cần đặc biệt cẩn trọng với migration database — luôn viết migration theo hướng tương thích ngược (backward compatible) trong ít nhất 1 chu kỳ deploy, tránh tình huống rollback code nhưng không rollback được schema database đã đổi.
🏋️ Bài tập thực hành
Thiết kế (trên giấy hoặc file YAML thật) 1 pipeline CI/CD đầy đủ cho ứng dụng đã container hoá ở khoá Docker: build → test → scan bảo mật → deploy staging → smoke test → deploy production (yêu cầu phê duyệt thủ công). Chọn 1 chiến lược deployment phù hợp (rolling/blue-green/canary) cho ứng dụng đó, giải thích lý do lựa chọn, và viết kế hoạch rollback cụ thể.
📚 Tài nguyên học tập
-
Martin Fowler — BlueGreenDeploymentBài viết kinh điển về Blue-Green DeploymentBài viết
-
GitHub — Deployment environmentsTài liệu cấu hình environment & required reviewers trong GitHub ActionsDocs
-
Google Cloud — Canary deploymentsGiải thích chi tiết canary deploymentDocs
✅ Tự đánh giá hoàn thành
- Thiết kế được pipeline nhiều stage với cổng chặn rõ ràng
- So sánh được rolling/blue-green/canary và chọn đúng theo tình huống
- Có kế hoạch rollback cụ thể trước khi deploy, không phải nghĩ ra sau sự cố
- Hiểu vì sao migration database cần tương thích ngược khi dùng rolling update