1Ba cách xử lý khi bản mới lỗi
Rollback: quay về phiên bản trước. Nhanh nếu artifact còn và schema tương thích.
Fix-forward: sửa lỗi và deploy tiếp. Đôi khi an toàn hơn khi migration đã chạy.
Mitigation: tắt feature flag, chuyển traffic, giảm tải. Không cần deploy.
Thứ tự ưu tiên trong sự cố: giảm tác động trước, tìm nguyên nhân sau.
2Vì sao rollback thất bại
- Migration database một chiều (xoá cột, đổi kiểu dữ liệu).
- Artifact cũ không còn trong registry.
- Cấu hình hoặc secret đã thay đổi.
- External state (queue, payment, third-party) không quay lại được.
- Không ai có quyền rollback ngoài giờ.
Mỗi nguyên nhân cần một biện pháp riêng. Không có “rollback” chung chung.
Đưa “rollback plan” vào tiêu chí nghiệm thu hợp đồng. Hỏi: “Rollback gần nhất được test khi nào, mất bao lâu?” Đây là khác biệt giữa vendor và partner.
| Tình huống | Nên làm |
|---|---|
| Lỗi app, schema chưa đổi | Rollback image |
| Migration đã chạy, dữ liệu đổi | Fix-forward hoặc feature flag |
| Tính năng mới lỗi | Tắt flag |
| Phụ thuộc bên thứ ba lỗi | Circuit breaker + giảm tải |
3Hỏi khách điều gì
- “Rollback gần nhất mất bao lâu?”
- “Migration có down migration không?”
- “Ai có quyền rollback ngoài giờ?”
- “Đã diễn tập rollback lần nào chưa?”
Rollback chỉ là lý thuyết. Không có down migration. Registry chỉ giữ image mới nhất. Không ai dám rollback vì sợ mất dữ liệu.
Điểm cần nhớ
- Giảm tác động trước, tìm nguyên nhân sau.
- Migration một chiều là rủi ro lớn nhất.
- Feature flag là rollback tức thì.
- Rollback phải được test định kỳ.