X-Planner: Event-Structured Task Planning for Embodied Intelligence

Nghiên cứu này trình bày X-Planner, một front-end lập kế hoạch cho hệ thống VLA nhằm giải quyết vấn đề thiếu cấu trúc trung gian trong các tác vụ dài hạn. X-Planner kết hợp dữ liệu từ Ego, UMI và teleoperation với độ chi tiết phân cấp khác nhau, đồng thời sử dụng dữ liệu takeover-time và các lỗi do con người thiết kế để giám sát việc nhận diện lỗi. Về kiến trúc, mô hình sử dụng một VLM backbone chung để xuất ra hai dạng kế hoạch cấu trúc sự kiện: giao diện rời rạc (discrete interface) cho trạng thái sự kiện và giao diện tiềm ẩn (latent interface) truyền trạng thái CoT liên tục qua các tầng Transformer bằng Staircase Decoding. Kết quả đánh giá ngoại tuyến xếp X-Planner thứ hai trong bốn mô hình trên cả BERTScore-F1 lẫn điểm Overall của giám khảo.

X-Planner xếp thứ hai trong bốn mô hình được đánh giá trên cả BERTScore-F1 lẫn điểm Overall dựa trên giám khảo trong đánh giá lập kế hoạch ngoại tuyến hai bước.