The Past Frames the Future: Memory for Autoregressive Video Generation

Cet article présente une revue systématique et complète des mécanismes de mémoire dans la génération vidéo autorégressive (AR). À mesure que les séquences générées s'allongent, les modèles font face à des contraintes strictes sur les fenêtres de contexte, le stockage et le calcul, entraînant la perte d'informations historiques critiques. Les auteurs formulent la mémoire de manière opérationnelle comme des informations historiques persistantes maintenues à travers les étapes AR externes pour influencer la génération future. La littérature est organisée selon cinq perspectives complémentaires : Formes, Fonctions, Opérations, Apprentissage et Évaluation.