FrameMorrow: Future-guided Frame Selection with Prospective Tokens for Long-Horizon Video Generation

L'article présente FrameMorrow, un sélecteur d'images prospectives qui prédit un petit ensemble de jetons prospectifs représentant les besoins d'information futurs pour guider la sélection des images historiques. En sélectionnant les images historiques en fonction de leur pertinence par rapport aux besoins futurs, FrameMorrow permet une intégration plug-and-play à travers divers modèles génératifs, y compris les architectures open/closed-source, avec un surcoût d'inférence minimal.