Advanced QA & Test Engineering
Trang chủ / Module 7
🖼️ Module 7 / 15 · 4-5 ngày

Visual Regression Testing

Phát hiện lỗi giao diện mà test logic thông thường không bao giờ bắt được — so sánh ảnh chụp màn hình có kiểm soát, tránh false positive.

Visual TestingScreenshot Diff
📌 Vì sao module này quan trọng

1 đoạn CSS đổi vô tình khiến nút bấm bị che khuất, chữ tràn ra ngoài khung — test logic/functional hoàn toàn pass bình thường vì element vẫn "tồn tại" trong DOM, chỉ là hiển thị sai. Visual Regression Testing là lớp phòng thủ duy nhất bắt được nhóm lỗi này một cách tự động.

🎯 Mục tiêu học tập

  • Hiểu nguyên lý Visual Regression Testing: baseline, so sánh, và diff có kiểm soát
  • Cấu hình đúng để tránh false positive từ các yếu tố không ổn định (font rendering, animation, dữ liệu động)
  • Thiết lập quy trình review và cập nhật baseline có chủ đích, không tự động chấp nhận mọi thay đổi
  • Tích hợp Visual Regression Testing vào pipeline CI/CD đúng vị trí

Nguyên lý: Baseline, So sánh, Diff

# Playwright có visual comparison tích hợp sẵn
await expect(page).toHaveScreenshot("checkout-page.png");
// Lần đầu chạy: LƯU LẠI ảnh hiện tại làm "baseline" (ảnh chuẩn)
// Các lần sau: chụp ảnh mới, SO SÁNH pixel-by-pixel với baseline
// Nếu khác biệt vượt ngưỡng cho phép -> test FAIL, sinh ra ảnh "diff" highlight vùng khác biệt

Công cụ visual testing (Playwright, Percy, Chromatic, Applitools) chụp ảnh màn hình ở các điểm kiểm tra đã định nghĩa, so sánh với ảnh "chuẩn" (baseline) đã được duyệt trước đó — bất kỳ khác biệt pixel nào vượt ngưỡng cho phép sẽ bị gắn cờ, kèm hình ảnh trực quan highlight chính xác vùng đã thay đổi, giúp review nhanh hơn nhiều so với đọc code diff thuần văn bản.

Tránh False Positive — Thách thức Lớn nhất

Nguồn gây False PositiveCách xử lý
Animation/transition đang chạy dở khi chụp ảnhTắt animation trong môi trường test (CSS override), hoặc chờ animation kết thúc trước khi chụp
Dữ liệu động (timestamp, số ngẫu nhiên, avatar người dùng thật)Mask/che vùng chứa dữ liệu động, hoặc dùng dữ liệu test cố định (liên hệ Test Data Management, Module 12)
Khác biệt font rendering giữa các hệ điều hành/trình duyệtLuôn chụp ảnh trên CÙNG 1 môi trường chuẩn hoá (ví dụ luôn qua Docker container cố định — liên hệ khoá Docker) cho cả baseline lẫn lần test sau
Con trỏ chuột/cursor nhấp nháyẨn cursor trước khi chụp, hoặc dùng chế độ chụp không bao gồm overlay hệ thống
⚠️ Visual Test Flaky còn khó chịu hơn E2E Flaky

Nếu không kiểm soát tốt các nguồn nhiễu trên, Visual Regression Testing trở thành nguồn flaky test tồi tệ nhất trong toàn bộ pipeline — vì ảnh chụp nhạy cảm với vô số yếu tố nhỏ mà logic test thông thường hoàn toàn không quan tâm.

Quy trình Review & Cập nhật Baseline có Chủ đích

Khi visual test fail, có 2 khả năng: (1) lỗi thật — UI bị hỏng ngoài ý muốn, cần sửa code, hoặc (2) thay đổi có chủ đích — UI đã được cập nhật đúng như thiết kế mới, cần duyệt và cập nhật baseline. Quy trình đúng luôn có bước con người xem xét ảnh diff và quyết định — không bao giờ để CI tự động "accept" baseline mới mà không ai review, vì điều đó vô hiệu hoá hoàn toàn giá trị bảo vệ của kỹ thuật này.

Tích hợp vào Pipeline CI/CD đúng vị trí

Visual Regression Testing thường chậm hơn unit/integration test (Module 1) và cần môi trường render nhất quán — nên đặt ở tầng riêng trong pipeline (liên hệ khoá DevOps, Module 3), chạy sau khi các tầng test nhanh hơn đã pass, và thường chỉ chạy đầy đủ trên các trang/component quan trọng nhất (đúng tư duy Risk-based Testing, Module 1) thay vì mọi màn hình của ứng dụng — chi phí duy trì baseline cho hàng trăm màn hình tăng theo cấp số nhân nếu không chọn lọc.

🏋️ Bài tập thực hành

Thiết lập Visual Regression Testing cho 1 Trang Quan trọng

Chọn 1 trang UI quan trọng trong dự án (ví dụ trang thanh toán). Thiết lập visual test bằng Playwright, tạo baseline ban đầu. Cố tình sửa 1 dòng CSS gây lỗi hiển thị nhỏ (ví dụ đổi màu chữ trùng màu nền), chạy lại test và xác nhận nó phát hiện đúng. Cấu hình mask cho 1 vùng chứa dữ liệu động (nếu trang có) để tránh false positive.

📚 Tài nguyên học tập

✅ Tự đánh giá hoàn thành

  • Hiểu nguyên lý baseline/so sánh/diff của Visual Regression Testing
  • Xử lý được ít nhất 2 nguồn false positive phổ biến (animation, dữ liệu động)
  • Thiết lập được quy trình review baseline có con người quyết định, không tự động chấp nhận
  • Chọn đúng vị trí và phạm vi áp dụng Visual Testing trong pipeline CI/CD