CONSONANCE.for your information
Thứ Hai, 5 tháng 10, 2026frenvi

Đáng đọc kỹ

01 — agents 5 upvote

Root-Cause Attribution Is a Search Problem: Continual Search for Long-Horizon Agent Failures

CÂU HỎI — Làm thế nào để cải thiện độ chính xác trong việc gán nguyên nhân gốc rễ cho các lỗi tác giả trình tự dài trong log thực thi của AI agents?

Nghiên cứu giải quyết vấn đề quy kết nguyên nhân gốc rễ (RCA) cho các lỗi của tác nhân chạy dài (long-horizon agent) khi log thực thi quá lớn và thông tin liên quan bị phân tán. Các tác giả giới thiệu Continual Search, một framework lặp thúc đẩy judge tiếp tục tìm kiếm bằng chứng chẩn đoán chưa được giải quyết qua các lượt sucesessive thay vì dừng lại sớm ở một chẩn đoán hợp lý nhưng nông cạn. Họ cũng giới thiệu MegaRCA-Mix gồm 50 thử nghiệm lỗi có chú thích từ con người để đánh giá ở quy mô lớn. Kết quả thực nghiệm cho thấy phương pháp này cải thiện đáng kể điểm F1 và chứng minh rằng việc tìm kiếm hiệu quả quan trọng hơn quy mô mô hình thuần túy.

MegaRCA-Mix cung cấp 50 thử nghiệm lỗi do con người chú thích cho các tác vụ nặng về thực thi kéo dài.

Trên MegaRCA-Mix, Continual Search cải thiện điểm F1 của GPT-5.5 hơn 40%, từ 0.349 lên 0.498.

Các mô hình cấp thấp hơn trong cùng một họ mô hình có thể vượt qua các đối thủ cấp cao hơn, chứng minh rằng tìm kiếm hiệu quả vượt trội hơn quy mô mô hình thô.

Harsh1729 · 11 thg 9, 2026 đọc bản gốc ↗
↑