proto.lib

Giám sát Control Plane: kube-apiserver, etcd, controller

Khi control plane của cụm chậm, workload vẫn chạy nhưng mọi thứ 'trông kỳ lạ': cần theo dõi request rate/latency theo verb và resource của API server, giới hạn inflight-request và priority queue, độ trễ ghi và kích thước database của etcd, và độ sâu work-queue của các controller loop.

ObservabilityNâng cao2026-08-25
Giám sát Control Plane: kube-apiserver, etcd, controller

Tags

#control-plane#apiserver#etcd#kubernetes#priority-fairness#controller

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ObservabilityTrung bình

Giám sát Kubernetes Event Stream trước khi chúng biến mất

Event của Kubernetes (FailedScheduling, ImagePullBackOff, OOMKilled, Unhealthy) giải thích TẠI SAO một sự cố xảy ra, nhưng chúng lưu trong etcd với TTL khoảng 1 giờ và không phải là metric — nên watch, export ra log/metric, dedupe theo count/firstTimestamp/lastTimestamp, và alert theo pattern thay vì chạy kubectl describe thủ công.

#kubernetes#events#etcd-ttl#watch-api
ObservabilityTrung bình

kube-state-metrics vs cAdvisor: hai nguồn dữ liệu khác nhau

cAdvisor nằm trong kubelet, đọc cgroups để báo cáo tài nguyên container đang dùng (CPU, memory, io); kube-state-metrics đọc API server và báo cáo trạng thái object (replicas mong muốn vs sẵn sàng, pod phase, restart count) — không đo tài nguyên nào cả. Hai nguồn này thường bị nhầm lẫn khi viết alert.

#kubernetes#cadvisor#kube-state-metrics#kubelet
ObservabilityTrung bình

Log Pattern Clustering: gom triệu dòng log thành vài chục mẫu

Thay vì đọc log thô, hệ thống chuẩn hoá phần biến (id, số, timestamp) trong mỗi dòng thành template cố định, rồi đếm số dòng theo từng template để phát hiện mẫu mới xuất hiện hoặc tăng vọt sau deploy — dùng để triage nhanh.

#log-clustering#log-pattern#log-template#triage