proto.lib

Chaos Engineering Game Day

Một buổi game day chủ động tiêm lỗi vào hệ thống production-like để kiểm chứng khả năng quan sát và phản ứng sự cố.

ObservabilityTrung bình2026-07-15
Chaos Engineering Game Day

Tags

#chaos-engineering#game-day#fault-injection#resilience#drill

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ArchitectureNâng cao

Fault Injection: chứng minh fallback thật sự hoạt động

Lỗi (độ trễ tăng, trả lỗi, phụ thuộc chết hẳn) được tiêm có chủ đích vào một service trong môi trường kiểm soát hoặc một lát cắt nhỏ của production, với giả thuyết đặt ra trước và điều kiện dừng rõ ràng — vì một đường fallback chưa từng được thực thi là một đường fallback chưa chắc hoạt động.

#fault-injection#chaos-engineering#resilience-testing#fallback-verification
ObservabilityTrung bình

Log Pattern Clustering: gom triệu dòng log thành vài chục mẫu

Thay vì đọc log thô, hệ thống chuẩn hoá phần biến (id, số, timestamp) trong mỗi dòng thành template cố định, rồi đếm số dòng theo từng template để phát hiện mẫu mới xuất hiện hoặc tăng vọt sau deploy — dùng để triage nhanh.

#log-clustering#log-pattern#log-template#triage
ObservabilityTrung bình

Flaky Test Detection: biến test hay trượt thành dữ liệu

Thay vì để cả team retry mù khi CI đỏ, hệ thống lưu kết quả từng lần chạy theo test id kèm commit, phát hiện test đổi kết quả trên CÙNG một commit (pass rồi fail), chấm điểm flakiness rồi tự động quarantine và báo đúng chủ sở hữu.

#flaky-test#ci#test-quarantine#test-reliability