WanPE: Towards Cinematic Prompt Enhancement for Modern Text-to-Video Generation

L'article présente WanPE, un modèle d'amélioration d'invites de 397B paramètres entraîné sur 1,05 million de vidéos réelles pour gérer la planification cinématographique au niveau des plans. WanPE combine une construction inverse ancrée dans la vidéo avec le GRPO à cohérence sémique (SC-GRPO) pour maintenir les contraintes de l'utilisateur. Intégré à Wan3.0, WanPE améliore considérablement les scores de préférence humaine par rapport aux invites brutes.

WanPE est un modèle d'amélioration d'invites de 397B paramètres entraîné sur 1,05M de vidéos.

WanPE utilise le Semantic-Consistency GRPO (SC-GRPO) pour préserver la fidélité sémantique.

WanPE augmente les scores de préférence humaine de 10,66-18,84 points à 5-15 secondes et de 50,86 points à 30 secondes.