proto.lib

Schema-on-Read vs Schema-on-Write cho Log

Parse log ngay lúc ghi (schema-on-write) cho ra field có kiểu, query nhanh và rẻ nhưng đổi format cần deploy lại code; parse lúc query (schema-on-read) giữ nguyên dòng thô, linh hoạt nhưng phải parse lại trên mọi query trong một khoảng thời gian lớn.

ObservabilityTrung bình2026-08-25
Schema-on-Read vs Schema-on-Write cho Log

Tags

#logging#schema-on-read#schema-on-write#log-parsing#query-cost#structured-logging

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

ObservabilityTrung bình

Logs-to-Metrics Derivation

Trích xuất metric và alert từ pattern trong log, ví dụ đếm số dòng lỗi để tạo counter thời gian thực.

#logging#metrics#log-parsing#alerting
ObservabilityTrung bình

Đo SLI từ đâu: metrics, trace, log, và tại điểm nào

Cùng một chỉ số khả dụng đo từ metrics (rẻ, đầy đủ, thô), từ trace (chi tiết từng request nhưng có sampling), hoặc từ log (chính xác nhưng đắt) sẽ cho ba con số khác nhau; và việc đo tại client, load balancer hay service cũng đổi luôn ý nghĩa của con số, vì một 200 OK ở phía service không nói lên gì về người dùng mà kết nối đã đứt giữa đường.

#sli#metrics#tracing#logging
ObservabilityCơ bản

Grok Parsing & Field Extraction

Logstash/Fluentd dùng Grok pattern để bóc tách log dạng chuỗi thô thành các trường có cấu trúc phục vụ tìm kiếm.

#grok#regex#log-parsing#field-extraction