ScienceIDE: Turning World's Scientific Codebase into Agent Learnable Environments

Các tác giả giới thiệu ScienceIDE, một hệ thống hạ tầng giúp chuyển đổi mã nguồn khoa học thành các môi trường lập trình cho agent. Được dẫn dắt bởi các tiêu chí chấp nhận từ chuyên gia, các agent biến kho lưu trữ thành môi trường thực thi hỗ trợ tạo tác vụ, thực thi và kiểm định khoa học. Dựa trên các quỹ đạo tương tác đã kiểm chứng, nhóm đã huấn luyện dòng mô hình PhAI-IDE gồm các kích cỡ 72B, 9B và 4B. Dòng mô hình này đạt hiệu suất cao hơn trong việc sửa mã khoa học chưa thấy trước đó và trên các benchmark tổng quát về mã, suy luận và tri thức, chứng minh khả năng truyền tải tri thức tích cực từ kinh nghiệm khoa học sang các năng lực rộng hơn.

ScienceIDE biến kho mã khoa học thành môi trường lập trình hỗ trợ tạo tác vụ, thực thi và kiểm định.

Dòng mô hình PhAI-IDE gồm các phiên bản 72B, 9B và 4B được huấn luyện từ các quỹ đạo tương tác đã được kiểm chứng.

Mô hình cho thấy sự cải thiện trong việc sửa mã khoa học và các benchmark tổng quát về mã, suy luận và tri thức.