LLMs are General Asynchronous Agents

Bài báo đề xuất một framework LLM bất đồng bộ mới cho phép người dùng hoặc bản thân các agent định nghĩa các coroutine suy luận với các trạng thái bộ nhớ chồng chéo nhau. Thay vì chu trình tương tác tuần tự truyền thống gồm đọc, suy nghĩ và trả lời, hệ thống này hỗ trợ xử lý đồng thời các luồng đầu vào mới trong khi agent đang thực hiện tác vụ khác. Các tác giả thử nghiệm trên dòng mô hình Qwen 3.x, chứng minh khả năng vận hành bất đồng bộ hiệu quả trong các bài toán hiểu video trực tuyến, trò chơi điện tử và hệ thống giám sát mà không cần tinh chỉnh chuyên biệt.

Framework hỗ trợ định nghĩa các inference coroutine với các memory state chồng chéo.

Qwen 3.x models có khả năng vận hành bất đồng bộ cho streaming video understanding, videogames và monitoring mà không cần task-specific training.