FlowTool: Controlling Tool Parameter in Image Retouching via Flow Matching

Les auteurs présentent FlowTool, un cadre qui formule la retouche d'image basée sur des outils comme un problème d'appariement de flux plutôt que d'utiliser des MLLMs autorégressifs. En combinant un modèle vision-langage et un générateur de paramètres Diffusion Transformer, FlowTool modélise directement la distribution de paramètres continus à partir de bruit gaussien. Entraîné via un cursus supervisé et un post-entraînement par récompense, FlowTool surpasse les agents d'édition spécialisés sur les benchmarks de référence tout en réduisant la latence d'au moins 50 fois et en nécessitant près de 2 fois moins de mémoire.

FlowTool formule la retouche d'image comme une génération conditionnelle sur des paramètres continus sans raisonnement autorégressif.

Le cadre améliore considérablement l'efficacité de l'inférence, réduisant la latence d'au moins 50times.

FlowTool nécessite près de 2times moins de mémoire que les bases de référence comparées.