EmbodiedMemory-Bench: Benchmarking Embodied Memory for Long-Horizon Embodied Tasks

Bài báo chỉ ra các điểm yếu cốt lõi trong bộ nhớ của agent embodied và giới thiệu EmbodiedMemory-Bench (EMem-Bench) với 2.554 tập tương tác nhằm đánh giá năng lực bộ nhớ này. Để giải quyết vấn đề, nhóm tác giả phát triển Embodied-Memorizer (EMem), một hệ thống bộ nhớ ngoài phân loại trải nghiệm thành bộ nhớ không gian, sự kiện và cảnh quan, đi kèm chính sách EMem-8B để quản lý. Kết quả cho thấy EMem cải thiện hiệu suất cho cả mô hình nguồn mở lẫn độc quyền.

EMem-Bench comprises 2,554 interactive episodes across four task families.

Under matched backbones, EMem achieves the best overall performance among the evaluated memory systems and improves both open-source and proprietary models, while EMem-8B further improves over its backbone.