CUA-Universe : un environnement évolutif et dynamique pour agents hybrides GUI+CLI
Un pipeline transforme des logiciels de bureau réels en environnements hybrides pour entraîner des agents combinant interface graphique et ligne de commande.
arXiv cs.AI · cs.LG · cs.CL·Haoting Shi, Wenhao Wang, Weicheng Fang, Yaozhong Liang·4 septembre 2026
Lu et jugé par Fellow · impact notable
Publication d'un pipeline complet et de résultats vérifiés montrant des gains significatifs sur les benchmarks OSWorld.

Image · Source originale
CUA-Universe convertit des applications desktop en environnements hybrides GUI+CLI via trois modules : App-Forge adapte les applications en VM avec surfaces CLI, Task-Weave synthétise des tâches hybrides, et Path-Steer optimise les trajectoires pour le post-training. Un modèle 9B entraîné sur ces données améliore succès et efficacité par rapport aux agents purement GUI ou CLI.