Training Specialist Models without Reasoning Trajectories for Domain Expert Distillation

Nghiên cứu này khảo sát các mô hình chuyên gia (specialist models) được huấn luyện chỉ bằng dữ liệu câu hỏi-câu trả lời thô. Bằng cách sử dụng phương pháp chưng cất sinh viên (student distillation) như một công cụ thăm dò độc lập, nhóm tác giả phát hiện ra rằng việc tối ưu hóa chuyên gia thực chất ngầm chọn lọc từ không gian quỹ đạo tiềm ẩn. Phân tích thực nghiệm trên 27 cặp chuyên gia-sinh viên cho thấy hồ sơ chuyên môn hóa và tổng quát hóa của chúng có mối tương quan rất chặt chẽ. Hơn nữa, việc chủ động kiểm soát sự trôi dạt phân phối (distributional drift) của chuyên gia cho phép điều chỉnh sự đánh đổi giữa độ chính xác miền và khả năng tổng quát hóa trên cả mô hình giáo viên lẫn học sinh.

Nghiên cứu khảo sát trên tổng cộng 27 specialist--student pairings.

Hồ sơ specialization--generalization giữa specialist và student có mối tương quan ngoại lệ rất mạnh.