TAP : préentraînement agnostique à la tâche pour les modèles VLA

Les modèles Vision-Language-Action (VLA) sont limités par la rareté des démonstrations expertes. TAP (Task-Agnostic Pretraining) propose de dissocier l'apprentissage moteur — via des données d'interaction non étiquetées et un objectif Inverse Dynamics — de l'alignement langagier, appris en second avec peu de données supervisées. Sur le benchmark SIMPLER, TAP égale des modèles entraînés sur plus d'un million de trajectoires expertes, avec un gain de 10 % sur le clonage comportemental standard, et conserve 25 % de succès sous perturbations caméra là où les baselines tombent à 0 %.