Le pretraining apporte le quoi, la simulation le comment : généralisation compositionnelle d'un agent robot entraîné en simulation

Les auteurs présentent Zero-real Agent Policy (ZAP), une méthode qui part d'un modèle vision-langage pré-entraîné de 27B paramètres, puis applique du supervised fine-tuning et du GRPO sur des tâches simulées simples. Sans donnée robot réelle, ZAP atteint 96,7 % de succès en conditions réelles, au niveau de GPT-6 Astra dans leur harness, contre 33,3 % pour MolmoAct2, avec une exécution 3 fois plus rapide et 17 fois moins chère. Il généralise à de nouveaux objets, objectifs et consignes, et atteint 55,9 % sur RoboLab-120 avec un Franka à un bras, soit 4,9 points devant la meilleure baseline VLA/WAM.