Agora: Git as Shared Memory for Collective AutoResearch

Nghiên cứu giới thiệu Agora, một hệ thống bộ nhớ chia sẻ sử dụng Git dưới dạng đồ thị có hướng không có chu trình (DAG) để các coding agent phối hợp tự động cải tiến mô hình. Các kết quả và giả thuyết được lưu trữ thành các commit bất biến để bất kỳ agent nào cũng có thể kiểm tra và chạy lại. Trong một thử nghiệm kéo dài gần 12 ngày với 13 worker ngôn ngữ lớn làm việc trên một bài toán chuyển trọng số mô hình, hệ thống đã xử lý 1.703 đóng góp và cải thiện đáng kể đánh giá từ 3,39 xuống 1,899 bit mỗi byte.

Các worker đã xuất bản 1.703 đóng góp và cải thiện đánh giá từ 3,39 xuống 1,899 bits per byte.

Giải pháp chiến thắng khép lại 62% khoảng cách so với một mô hình GPT-2 124M đã qua huấn luyện.