proto.lib

Partition Key Hashing - Chọn Partition Theo Key

Producer băm (hash) message key để quyết định message đi vào partition nào, đảm bảo các message cùng key luôn vào cùng một partition.

MessagingCơ bản2026-07-08
Partition Key Hashing - Chọn Partition Theo Key

Tags

#kafka#partitioning#hashing#message-key#ordering

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

MessagingTrung bình

Partitioning và Ordering

Partition key giữ thứ tự message theo từng key; tăng số partition giúp song song hóa nhưng mất thứ tự toàn cục.

#kafka#partitioning#ordering#throughput
MessagingTrung bình

Protocol Bridge: MQTT sang Kafka

Bridge nối hai thế giới giao thức khác nhau: hàng nghìn session thiết bị MQTT một bên, và các topic Kafka có phân vùng bên kia. Nó ánh xạ cây topic thiết bị thành partition key, dịch QoS của MQTT thành ngữ nghĩa acknowledgement của Kafka, và mang theo device identity dưới dạng header xuyên suốt.

#mqtt#kafka#protocol-bridge#iot
MessagingTrung bình

Retry khi có nhiều batch in-flight: mất thứ tự message

Khi producer cho phép nhiều batch cùng bay tới một partition (max.in.flight.requests.per.connection > 1), một batch đầu bị lỗi và retry có thể đến broker SAU batch thứ hai đã thành công, khiến thứ tự theo key bị đảo ngược âm thầm; idempotent producer dùng sequence number để broker phát hiện và sắp xếp lại đúng.

#kafka#producer#in-flight-requests#retries