Chinese-Jev: Bringing System One Model to Chinese-Language Tasks

Các tác giả giới thiệu Chinese-Jev, một mô hình Hệ thống Một (System One) xử lý các tác vụ quyết định bằng tiếng Trung thông qua quy trình huấn luyện và xử lý dữ liệu đồng nhất. Mô hình sử dụng kiến trúc encoder-only gọn nhẹ cùng đường ống huấn luyện gồm giai đoạn tiền huấn luyện trên 10 triệu mẫu và tinh chỉnh theo từng lĩnh vực y tế, luật, tài chính. Kết quả đánh giá trên benchmark mới CJ-Bench cho thấy mô hình vượt qua Jev bản gốc về độ chính xác lĩnh vực chung 1.24% với tốc độ nhanh hơn 20.3x. Ở các miền chuyên biệt, mô hình đạt mức cải thiện 4.0% trong y tế, tốc độ nhanh 17x, độ trễ trung bình 15 ms mỗi mẫu và hỗ trợ chạy định lượng INT8 trên thiết bị di động với độ trễ khoảng 1.0 giây.

Sau tiền huấn luyện giai đoạn đầu, Chinese-Jev vượt độ chính xác của Jev gốc 1.24% trên tác vụ miền chung với tốc độ nhanh hơn 20.3x.

Tinh chỉnh chuyên ngành mang lại cải thiện độ chính xác 4.0% so với Jev trong y tế, đạt 17x tốc độ và độ trễ trung bình 15 ms mỗi mẫu.

Mô hình định lượng INT8 triển khai trên thiết bị di động đạt độ trễ khoảng 1.0 giây mỗi quyết định.