X-Tree: Tokenizing Reusable Experience for Efficient Agent Generalization

Nghiên cứu giới thiệu X-Tree, một phương pháp xây dựng từ vựng kinh nghiệm bằng cách chấm điểm các khoảng hành động theo khả năng tái sử dụng và hợp nhất các hành động được chuẩn hóa thành cây kinh nghiệm (X-Tree) dựa trên dữ liệu thuần túy mà không cần gọi LLM. Mỗi nút X-Tree nắm bắt cách một kỹ năng thường xuyên được cấu thành từ các kỹ năng phụ. Tác giả tích hợp X-Tree vào học tăng cường ngoại tuyến, RLVR trực tuyến và tự chưng cất trên chính sách. Kết quả trên WebArena, ScienceWorld và WebShop cho thấy X-Tree cải thiện độ chính xác tỷ lệ thành công lên tới 4.5% trên WebArena, 5.8% trên ScienceWorld và 4.1% trên WebShop so với các công thức tiêu chuẩn.

X-Tree cải thiện tỷ lệ thành công lên tới 4.5% SR trên WebArena.

X-Tree cải thiện tỷ lệ thành công lên tới 5.8% SR trên ScienceWorld.

X-Tree cải thiện 4.1% tỷ lệ thành công trên WebShop so với công thức tiêu chuẩn.