CONSONANCE.for your information
lundi 5 octobre 2026frenvi

À lire de près

01 — training 5 votes

EDGEGEN: Improving Tool-Calling Agents Beyond Happy Paths with Synthetic Edge Case Generation

QUESTION — Comment générer automatiquement des tâches de cas limites pour évaluer et optimiser les agents d'appel d'outils sans annotation humaine ?

Cet article propose EdgeGen, un cadre de génération de tâches synthétiques qui extrait des règles de conformité à partir des spécifications d'un agent pour produire des cas limites ancrés dans une base de données. Fonctionnant comme un système en boucle fermée entièrement automatisé sans annotation humaine, EdgeGen améliore les agents par fine-tuning et optimisation de harnais. Le fine-tuning sur des données générées par EdgeGen produit des améliorations régulières de la progression moyenne de 2 pour cent à 42 pour cent sur le domaine aérien de tau2bench. De plus, pour l'optimisation du harnais, la méthode montre des améliorations de 10 pour cent et 30 pour cent par rapport aux harnais sélectionnés par l'homme et de base pour le modèle Gemma-4-e4b.

Le fine-tuning sur les données générées par EdgeGen produit une amélioration constante de la progression moyenne de 2 pour cent à 42 pour cent sur le domaine aérien tau2bench, tandis que d'autres méthodes de référence montrent une dégradation pour certains modèles.

Pour l'optimisation du harnais, notre méthode montre une amélioration de la progression moyenne de 10 pour cent et 30 pour cent par rapport aux harnais organisés par l'homme et de base, respectivement, pour le modèle Gemma-4-e4b.

ashutosh1919 · 21 sept. 2026 lire l'original ↗
↑