proto.lib

Retention Policy & Dọn Log Segment

Broker tự động xóa hoặc archive các log segment cũ hơn thời gian/kích thước retention cấu hình để giải phóng dung lượng đĩa.

MessagingCơ bản2026-07-08
Retention Policy & Dọn Log Segment

Tags

#kafka#retention#log-segment#cleanup#storage

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

MessagingTrung bình

Kafka Log Segment & Index

Partition log của Kafka được chia thành nhiều segment file, kèm theo offset index và time index để tra cứu nhanh.

#kafka#log-segment#offset-index#time-index
MessagingTrung bình

Ngữ nghĩa timestamp trong Kafka (event time vs log-append time)

Mỗi record Kafka có một timestamp: do producer gán (CreateTime, tức event time) hoặc do broker gán khi append vào log (LogAppendTime, tức ingestion time). Cấu hình message.timestamp.type của topic quyết định seek theo thời gian trả về gì và khi nào một segment đủ tuổi để bị xoá theo retention.ms.

#kafka#timestamp#retention#seek
MessagingTrung bình

Broker Kafka Hết Đĩa: xử lý khẩn cấp

Khi thư mục log của broker đầy, broker ngừng nhận ghi hoặc crash; nguyên nhân thường là retention quá dài so với dung lượng, một topic đột nhiên hot, compaction/xoá segment bị kẹt, hoặc replica offline đang catch-up làm log phình to; xử lý theo thứ tự an toàn tăng dần.

#kafka#disk-full#log-retention#log-segment