Self-Evolving Coding Agents: From Digital Programs to Physical-World Intelligence

L'article propose le codage physique pour représenter l'état des tâches et l'exécution sous forme de code (Code as World et Code as Policy) pour l'intelligence dans le monde physique. Les auteurs construisent HexaAnything, un système qui fait appel à des outils de perception, de planification et de contrôle pour prendre des décisions en boucle. Les traces vérifiées deviennent des données et de la mémoire, permettant l'auto-évolution. Les expériences sur RoboCasa365 et PhyBench montrent des améliorations significatives par rapport aux modèles de référence.

On RoboCasa365, HexaAnything improves Composite-Unseen and overall success over XR-1 VLA, and its Harness-trained HexaModel beats the base on every split, indicating code traces internalize physical execution.

On PhyBench and a dual-arm AgileX robot, the agent autonomously completes physics experiments and most tabletop tasks, often faster than published results.

We observe data, model, and tool self-evolution; future work targets weight internalization, autonomous redesign of architectures, languages, representations, and tasks, and deployment in manufacturing and science.