proto.lib

Kafka Client Quotas & Throttling

Broker áp dụng quota theo client-id hoặc user để giới hạn băng thông produce/consume, chủ động throttle client vượt hạn mức thay vì để cluster quá tải.

MessagingNâng cao2026-07-08
Kafka Client Quotas & Throttling

Tags

#kafka#quotas#throttling#multi-tenant#broker-config

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

MessagingTrung bình

Cách ly nhiều tenant trên một broker (namespace, quota, dedicated resource)

Một broker dùng chung cho nhiều khách hàng: không cách ly thì một tenant burst traffic hoặc backlog khổng lồ sẽ làm chậm tất cả người khác. Giải pháp là tách namespace/vhost/topic theo tenant, gán quota riêng, và với tenant ồn ào nhất thì cấp partition hoặc cluster riêng.

#multi-tenancy#isolation#quotas#throttling
MessagingTrung bình

ACL Kafka Đa Tenant: cấp quyền theo Principal

Mỗi client xác thực thành một principal, và ACL cấp cho principal đó quyền cụ thể trên resource cụ thể (WRITE trên topic, READ trên topic VÀ trên consumer group của nó, DESCRIBE, hoặc prefixed ACL theo quy ước đặt tên); lỗi kinh điển là cấp topic nhưng quên cấp group khiến consumer xác thực được nhưng không join được.

#kafka#acl#multi-tenant#authorization
MessagingTrung bình

Broker Kafka Hết Đĩa: xử lý khẩn cấp

Khi thư mục log của broker đầy, broker ngừng nhận ghi hoặc crash; nguyên nhân thường là retention quá dài so với dung lượng, một topic đột nhiên hot, compaction/xoá segment bị kẹt, hoặc replica offline đang catch-up làm log phình to; xử lý theo thứ tự an toàn tăng dần.

#kafka#disk-full#log-retention#log-segment