proto.lib

FIFO Queue: Strict Ordering & Deduplication

FIFO queue đảm bảo thứ tự nghiêm ngặt trong cùng một message group và tự động loại bỏ message trùng lặp trong khoảng thời gian dedup interval.

MessagingTrung bình2026-07-07
FIFO Queue: Strict Ordering & Deduplication

Tags

#sqs-fifo#message-group-id#deduplication#strict-ordering#exactly-once

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

MessagingNâng cao

Sink stream (Kafka) xuống Lakehouse: file cột + commit metadata

Sink connector đọc liên tục từ Kafka, gom bản ghi theo cửa sổ thời gian thành file cột (Parquet), rồi commit một snapshot metadata mới cho bảng lakehouse; exactly-once đạt được bằng cách gắn việc commit offset Kafka với chính việc commit snapshot đó, không tách rời.

#kafka#sink-connector#lakehouse#table-format
MessagingNâng cao

DLQ Ngập Lụt Sau Bad Deploy Và Quy Trình Replay

Một bản deploy lỗi khiến 100% message xử lý thất bại; nếu retry-rồi-DLQ không có circuit breaker, consumer vẫn thử lại từng message trước khi đẩy sang DLQ, nhân bản tải lên cả topic gốc lẫn downstream trước khi kịp dừng lại.

#dead-letter-queue#replay#circuit-breaker#deduplication
MessagingNâng cao

Transactional Producer - Ghi Atomic Nhiều Partition

Producer transactional gói nhiều lần ghi vào nhiều partition/topic thành một transaction atomic: hoặc tất cả commit, hoặc tất cả abort.

#kafka#transaction#atomic-write#exactly-once