proto.lib

Allowed Lateness và Side Output cho sự kiện trễ

Sau khi watermark vượt qua biên window, kết quả on-time được phát ra nhưng state vẫn giữ lại trong một khoảng allowed lateness để một sự kiện trễ còn có thể tạo ra kết quả UPDATED; sự kiện đến sau cả khoảng đó bị định tuyến sang side output thay vì bị âm thầm bỏ.

MessagingNâng cao2026-08-25
Allowed Lateness và Side Output cho sự kiện trễ

Tags

#allowed-lateness#side-output#windowing#late-events#watermark#flink#data-quality

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

MessagingTrung bình

Session Window theo khoảng ngừng hoạt động (Session Window Gaps)

Session window không cắt theo mốc thời gian cố định mà gom các sự kiện của một khoá khi chúng còn liên tiếp đến, và đóng lại sau một khoảng ngừng (gap) không có sự kiện mới; một sự kiện trễ có thể buộc engine gộp lại hai session tưởng đã tách rời.

#session-window#stream-processing#windowing#gap-timeout
MessagingNâng cao

Event-Time Windowing & Watermarks

Stream processor gom sự kiện vào tumbling window theo event time; watermark theo dõi tiến độ event time để quyết định khi nào trigger window và loại bỏ sự kiện đến muộn.

#stream-processing#event-time#watermark#windowing
MessagingNâng cao

Streaming SQL: khai báo transform thay vì code — materialized view tự cập nhật

Một câu SQL trên stream (ví dụ Flink SQL, ksqlDB) được compile thành một job chạy liên tục, duy trì kết quả dưới dạng materialized view (aggregate theo key, join giữa stream/table); các query phía sau chỉ đọc view đó, engine tự lo state và phát cập nhật khi input thay đổi.

#streaming-sql#materialized-view#ksqldb#flink