Knowledge Pull Requests for Continual Document Authoring

Tác giả giới thiệu Knowledge Pull Requests (KPRs), một framework giúp cập nhật tài liệu liên tục bằng cách trích xuất các khẳng định (claims), lọc và định tuyến chúng đến các phần tương ứng, đồng thời gắn cờ xung đột nội dung. KPR tạo ra ChangeLog giúp tách biệt rõ ràng việc tri thức nào thay đổi với việc văn bản được chỉnh sửa ra sao qua document diff. Thử nghiệm trên Wikipedia đa ngôn ngữ và các báo cáo truy vấn trên RAGTIME cho thấy KPR tích hợp nhiều thông tin hơn, bảo tồn nội dung hiện có tốt hơn việc viết lại từ đầu, đồng thời cung cấp grounding tốt hơn cho tác vụ question answering so với các frontier model có tính năng search.

KPRs tích hợp nhiều thông tin hơn và bảo tồn nội dung hiện có tốt hơn so với việc viết lại từ nguồn hoặc tạo lại từ đầu.

KPRs thêm lượng thông tin lớn nhất trên mỗi token được tạo ra.

Bài báo được sửa đổi qua KPR giúp grounding cho tác vụ question answering tốt hơn frontier model kèm search.