CERA-MoA: Co-Evolving Routing Mechanisms with Continually Learning LLM Agents

Nghiên cứu giới thiệu CERA-MoA, một framework học tăng cường lặp đi lặp lại nhằm giải quyết sự ngắt kết nối giữa định tuyến truy vấn và tinh chỉnh agent trong các mô hình Mixture-of-Agents (MoA). Hệ thống sử dụng một trình ước lượng độ quen thuộc dự đoán tận dụng trạng thái ẩn ở lớp trung gian để đánh giá năng lực ngữ nghĩa giữa các agent mà không cần chạy toàn bộ rollout. Dựa trên điểm số này, cơ chế định tuyến thích ứng kích hoạt tối thiểu tập agent phù hợp, đồng thời phân bổ dữ liệu huấn luyện mục tiêu để thúc đẩy sự chuyên môn hóa theo hướng dữ liệu.