proto.lib

Incident Lifecycle & Blameless Postmortem

Vòng đời một sự cố từ phát hiện, khắc phục tới postmortem không đổ lỗi nhằm rút ra bài học cải thiện hệ thống.

ObservabilityCơ bản2026-07-15
Incident Lifecycle & Blameless Postmortem

Tags

#incident#postmortem#blameless#reliability#process

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ObservabilityTrung bình

Dựng lại dòng thời gian sự cố (Incident Timeline Reconstruction)

Dòng thời gian đáng tin không dựa vào trí nhớ mà được ghép từ bằng chứng: deploy, thay đổi config/flag, alert, sự kiện scale, chat log và các điểm chuyển pha của metric — tất cả quy về một mốc giờ (UTC) và sắp theo thứ tự, giúp lộ ra nguyên nhân khởi phát thay vì cảm giác mơ hồ về thời gian đã trôi.

#incident-response#timeline#postmortem#deploy-marker
ObservabilityTrung bình

Đo lường phản ứng sự cố: MTTD/MTTA/MTTM/MTTR

Thời gian phát hiện (detect), xác nhận (acknowledge), giảm thiểu (mitigate) và giải quyết (resolve) một incident, tách theo mức độ nghiêm trọng, chỉ ra chính xác công đoạn nào trong quy trình đang chậm: detect chậm là lỗ hổng giám sát, acknowledge chậm là vấn đề paging/rota, mitigate chậm là vấn đề runbook/công cụ.

#incident-metrics#mttr#mtta#mttd
ObservabilityNâng cao

Ghép Trace và Vấn đề Orphan Span

Khi một số span bị mất hoặc tới muộn, backend phải ghép trace từ dữ liệu không đầy đủ, dẫn tới trace incomplete và orphan span không gắn được vào cây.

#trace-assembly#orphan-span#incomplete-trace#reconciliation