proto.lib

Deploy Marker: gắn nguyên nhân sự cố vào đúng bản deploy

Mỗi dashboard mang annotation deploy (service, version, thời điểm, người deploy) để một bước nhảy latency lúc 14:03 được quy trách nhiệm ngay lập tức; một automated check so sánh cửa sổ sau release với cửa sổ trước, theo từng service, để gắn cờ regression trước khi con người phát hiện.

ObservabilityTrung bình2026-08-25
Deploy Marker: gắn nguyên nhân sự cố vào đúng bản deploy

Tags

#deploy-marker#annotation#attribution#canary-window#rollback#regression-detection

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ObservabilityTrung bình

Dựng lại dòng thời gian sự cố (Incident Timeline Reconstruction)

Dòng thời gian đáng tin không dựa vào trí nhớ mà được ghép từ bằng chứng: deploy, thay đổi config/flag, alert, sự kiện scale, chat log và các điểm chuyển pha của metric — tất cả quy về một mốc giờ (UTC) và sắp theo thứ tự, giúp lộ ra nguyên nhân khởi phát thay vì cảm giác mơ hồ về thời gian đã trôi.

#incident-response#timeline#postmortem#deploy-marker
ObservabilityNâng cao

SLO Composition: Trần Khả Thi Từ Các Dependency

SLO của một request bị giới hạn bởi tích khả dụng của các dependency nó gọi tuần tự (99.9% × 99.9% × 99.9% ≈ 99.7%); để đạt SLO cao hơn trần này cần redundancy, cache, timeout kèm fallback, hoặc graceful degradation, và khi vi phạm cần quy trách nhiệm đúng dependency đã ăn ngân sách lỗi.

#slo#error-budget#dependency-composition#availability
ObservabilityNâng cao

Canary Analysis: so sánh metric để tự động promote/rollback

Sau khi một lát traffic nhỏ được đưa sang bản canary, một job phân tích so sánh error rate/latency/saturation của canary với baseline chạy song song trong cùng cửa sổ thời gian, chấm điểm từng metric rồi tự động promote hoặc rollback — không phải cách chia traffic, mà là cách phán xét kết quả.

#canary-analysis#rollback#baseline-comparison#statistical-confidence