X-Tree: Tokenizing Reusable Experience for Efficient Agent Generalization

Nous introduisons X-Tree, un cadre qui récupère les hiérarchies d'actions à partir des données en notant les portées d'actions par réutilisabilité et en fusionnant les actions canonisées dans un arbre d'expérience réutilisable (X-Tree) sans appels LLM. Chaque nœud X-Tree capture la composition d'une compétence fréquente à partir de sous-compétences. Nous intègrons X-Tree dans l'apprentissage par renforcement hors ligne, le RLVR en ligne et l'auto-distillation sur politique. Sur WebArena, ScienceWorld et WebShop à trois échelles de modèles, X-Tree améliore les recettes standard jusqu'à 4.5% SR sur WebArena, 5.8% SR sur ScienceWorld et 4.1% de succès sur WebShop.

X-Tree améliore le taux de réussite jusqu'à 4.5% SR sur WebArena.

X-Tree améliore le taux de réussite jusqu'à 5.8% SR sur ScienceWorld.

X-Tree améliore le succès jusqu'à 4.1% sur WebShop par rapport aux recettes standard.