proto.lib

Lambda vs Kappa Architecture

Lambda kết hợp batch layer chính xác và speed layer nhanh nhưng phức tạp khi bảo trì hai pipeline; Kappa đơn giản hoá bằng cách chỉ dùng một stream job replay lại toàn bộ event log.

ArchitectureNâng cao2026-07-07
Lambda vs Kappa Architecture

Tags

#lambda-architecture#kappa-architecture#stream-processing#batch-processing#event-log

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ArchitectureTrung bình

Bulk Import qua Staging: validate trước khi commit

Một file 2 triệu dòng được ghi vào object storage, parse và validate vào bảng STAGING (thu thập lỗi theo từng dòng, không abort cả job), trả báo cáo cho người dùng sửa và nộp lại, và chỉ batch đã hợp lệ mới được commit vào bảng live theo từng chunk — toàn bộ job resumable và idempotent theo file hash cộng row key.

#bulk-import#staging-table#validation#idempotency
ArchitectureNâng cao

Event Upcasting khi đổi phiên bản schema

Event đã ghi vào log là bất biến, nhưng code miền nghiệp vụ vẫn tiến hoá: mỗi event mang version tag, và bộ loader sẽ upcast event cũ thành hình dạng mới nhất khi đọc (thêm field mặc định, tách field, suy ra giá trị), để domain code chỉ bao giờ thấy đúng một shape hiện tại.

#event-sourcing#upcasting#schema-migration#versioning
ArchitectureNâng cao

Rebuild Projection từ Event Log (CQRS)

Read model trong CQRS chỉ là dữ liệu dẫn xuất nên có thể xoá và tính lại: khi phát hiện bug trong logic dựng projection, ta replay toàn bộ event log vào một phiên bản projection MỚI song song với bản cũ, rồi chuyển traffic đọc sang bản mới sau khi nó bắt kịp.

#cqrs#projection#event-log#replay