Mouvement humanoïde perceptif à partir de la simulation : le système HALO

Les auteurs présentent HALO, un système d'autonomie pour robots humanoïdes reposant sur un pipeline de synthèse de données vision-langage-mouvement dans mille maisons générées procéduralement, un corpus qui croît avec le calcul plutôt qu'avec le travail humain. HALO acquiert des compétences (s'asseoir, naviguer vers des objets nommés, ramper sous une table, pousser des boîtes) et les enchaîne pour des tâches longues. Sans jamais voir de vraie maison à l'entraînement, il atteint 91 % de réussite sur 360 essais dans six environnements réels inconnus. Code et vidéos sont publiés.