proto.lib

Giám sát độ tươi của Batch Job (Freshness & Deadman Check)

Một job chạy đêm không có error rate hay latency percentile để soi — thứ cần theo dõi là job có CHẠY hay không, có thành công hay không, và kết quả cũ tới mức nào; alert phải bắn khi KHÔNG THẤY lần chạy thành công nào (deadman check) chứ không đợi một sự kiện lỗi có thể không bao giờ được emit.

ObservabilityTrung bình2026-08-24
Giám sát độ tươi của Batch Job (Freshness & Deadman Check)

Tags

#batch-job#freshness#deadman-switch#data-pipeline#cron#idempotency#monitoring

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ObservabilityTrung bình

Giám sát Chất lượng Dữ liệu trong Data Pipeline

Pipeline có thể chạy xanh (không exception, không lỗi hệ thống) trong khi dữ liệu đầu ra sai; mỗi stage cần assert các contract trên OUTPUT — schema, volume, tỉ lệ null/uniqueness, distribution drift, referential integrity — và một assertion fail phải quarantine batch thay vì publish tiếp.

#data-quality#data-pipeline#schema-validation#data-contract
ObservabilityTrung bình

Deadman Switch Alert

Deadman switch cảnh báo khi dữ liệu heartbeat NGỪNG đến, phát hiện tình huống hệ thống giám sát chính nó cũng có thể im lặng khi có sự cố.

#deadman-switch#heartbeat#alerting#monitoring
ObservabilityTrung bình

Giám sát Backup và Restore Drill

Một backup job báo success gần như không chứng minh được gì: cần kiểm tra job có chạy, kích thước/thời gian nằm trong dải kỳ vọng, độ tuổi backup còn trong RPO, và định kỳ chạy thử restore thật để đo time-to-restore so với RTO.

#backup#restore-drill#rpo#rto