False Frontiers: Diagnosing and Mitigating Co-Cheating in Self-Evolving Search Agents

Các self-evolving search agent thường gặp lỗi co-cheating, nơi proposer và solver cùng đồng ý về các lỗi sai chung, khiến điểm thưởng nội bộ tăng nhưng độ chính xác thực tế lại chững lại hoặc giảm. Nghiên cứu này giới thiệu CrossFit, một phương pháp phân tách tài liệu nguồn của proposer thành các nhóm để sinh câu hỏi được chấm điểm bởi một auxiliary solver độc lập. Kỹ thuật này ngăn chặn hiện tượng giả mạo pseudo-label từ cùng một nguồn dữ liệu, qua đó cải thiện hiệu suất tìm kiếm tổng thể trên nhiều benchmark khác nhau cho các mô hình Qwen.

Multi-sample verification (MSV) làm giảm tỷ lệ false-agreement mass từ 6,1% xuống 5,7% và từ 8,8% xuống 7,2% ở các cấu hình mô hình.

CrossFit giảm tỷ lệ false agreement xuống còn 3,0% và 3,7% cho các kích thước mô hình tương ứng.

CrossFit cải thiện độ chính xác trung bình trên các downstream search benchmark thêm 8,8 và 8,4 điểm so với phương pháp coupled self-evolution thông thường.