OmniEdu: Open Foundation Models for Learning and Teaching

Công trình giới thiệu OmniEdu, một họ mô hình nền tảng mở dành cho học tập và giảng dạy K-12. Quy trình của tác giả kết hợp hơn 100 tài nguyên giáo dục và nguồn chỉ dẫn chung thông qua các bước làm sạch tất định, kiểm toán ngữ nghĩa, tính điểm chất lượng và lựa chọn đa dạng theo ngân sách token. Quy trình này tạo ra gần 70 nghìn ví dụ và hơn 15 triệu token phản hồi có giám sát để tinh chỉnh các mô hình kích thước 4B, 9B và 27B, giúp cải thiện toàn diện hiệu suất trên các benchmark giáo dục và giảng dạy.

Quy trình xử lý tạo ra 69,999 ví dụ và 15.96M token phản hồi có giám sát, bao gồm 60,951 ví dụ chuyên biệt về giáo dục.

OmniEdu-27B đạt 63.12% EM và 76.69% F1 trên K12-Bench, 85.89% trên MathFish, 86.95% trên EDUMATH và 78.74% ở cài đặt Scaffold của MathTutorBench.

OmniEdu-27B đạt điểm trung bình giảng dạy cao nhất trên LongTutor trong số các mô hình được đánh giá, ở mức 3.02.