proto.lib

Prompt Versioning & Registry

Prompt được quản lý phiên bản trong một registry trung tâm, cho phép rollback, A/B test và tách biệt thay đổi prompt khỏi việc deploy code.

AI/ML SystemsCơ bản2026-07-15
Prompt Versioning & Registry

Tags

#prompt-versioning#registry#prompt-engineering#llmops#rollback

Tài liệu tham khảo

Mở rộng

Animation gốc là một file HTML tự chứa, có thể nhúng lại ở bất kỳ trang nào khác. Mở file gốc

Liên quan

AI/ML SystemsNâng cao

Eval Regression Gate trong CI

Bộ eval vàng chạy như test trong CI: mỗi lần đổi prompt hoặc model, hệ thống chạy lại toàn bộ eval, so điểm với baseline đã lưu, và chặn merge nếu điểm tụt quá ngưỡng; để chống nhiễu, cần chạy nhiều lần và so theo khoảng tin cậy thay vì so từng điểm đơn lẻ.

#eval#ci-cd#regression-testing#llm-eval
AI/ML SystemsTrung bình

Thiết kế Tool Schema cho Agent

Bộ tool của agent nên ít nhưng rõ vai trò: mỗi tool có mô tả đủ để model chọn đúng, tham số bắt buộc/tuỳ chọn tách bạch, và error message phải dạy model tự sửa lần gọi kế tiếp thay vì chỉ báo lỗi suông.

#agent#tool-use#function-calling#schema-design
AI/ML SystemsTrung bình

Cổng CI chặn hồi quy prompt (Prompt Regression CI Gate)

Mỗi thay đổi prompt phải chạy qua một bộ case cố định với assertion tự động (schema hợp lệ, must-contain/must-not-contain, ngưỡng điểm judge) cùng ngân sách chi phí/độ trễ, và pull request bị chặn merge nếu có hồi quy — vì một câu chữ sửa được case này thường làm hỏng case khác.

#prompt-engineering#ci-cd#regression-testing#evaluation