proto.lib

Log Agent Buffering & Backpressure

Fluent Bit/Vector đệm log vào bộ nhớ rồi tràn xuống đĩa khi backend chậm, đảm bảo không mất dữ liệu dưới áp lực ngược.

ObservabilityTrung bình2026-07-15
Log Agent Buffering & Backpressure

Tags

#fluent-bit#vector#log-shipping#buffering#backpressure

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ObservabilityNâng cao

Thu thập Telemetry trong mạng khách hàng (On-Prem)

Agent chạy trong mạng khách hàng phải hoạt động không cần internet ra ngoài (hoặc qua proxy), tự đệm dữ liệu khi mất kết nối, chỉ xuất ra những gì hợp đồng cho phép (tổng hợp, không phải payload thô), và có thể nâng cấp mà không cần đụng vào cluster khách hàng quá thường xuyên.

#on-prem#telemetry-agent#buffering#data-residency
ObservabilityTrung bình

Saturation của Thread Pool: Queue Wait ẩn giấu

Khi mọi worker trong thread pool đều bận, request mới phải xếp hàng chờ trong queue của pool; tổng latency = queue wait time + service time, nhưng nếu chỉ đo thời gian xử lý bên trong handler thì thành phần queue wait hoàn toàn vô hình.

#thread-pool#queue-wait#saturation#littles-law
ObservabilityNâng cao

Hàng đợi & retry của OTel Collector: bộ đệm sống sót được bao lâu

Sending queue trong exporter của OTel Collector giữ các lô đã gom để gửi đi, retry_on_failure gửi lại theo backoff khi backend lỗi tạm thời; nhưng hàng đợi mặc định nằm trong bộ nhớ nên mất sạch nếu pod Collector restart — chỉ persistent queue (dùng file_storage extension) mới sống sót qua restart, đánh đổi bằng đĩa và độ phức tạp về thứ tự.

#otel-collector#sending-queue#retry-backoff#persistent-queue