APM-Bench: Benchmarking Cross-session Persistent Memory for Egocentric Streaming Video Assistants

Les assistants vidéo du monde réel ont besoin d'une mémoire persistante pour conserver les expériences passées à travers des interactions intermittentes, une exigence négligée par les benchmarks de diffusion en continu continus. Les auteurs introduisent APM-Bench, reformulant le streaming en trajectoires de vie multi-sessions comprenant 549 sessions, 104 trajectoires et 2 719 candidats avec des annotations fines. L'évaluation des modèles vidéo généraux et des systèmes de mémoire spécialisés révèle un compromis clair entre utilité, latence et stockage, démontrant que les méthodes actuelles peinent à assurer simultanément un rappel à long terme fiable et une assistance proactive efficace.

APM-Bench contient 549 sessions, 104 trajectoires et 2 719 candidats couvrant des questions objectives et ouvertes.

L'évaluation révèle un compromis clair entre l'utilité, la latence et le stockage, où les méthodes existantes luttent pour assurer un rappel à long terme fiable.