LIBERO-RIG : un benchmark de robustesse au matériel pour les modèles vision-langage-action

LIBERO-RIG perturbe le matériel et l'installation du robot sans modifier les tâches LIBERO, selon onze axes (caméras, calibration, gain d'actuation, fréquence de contrôle, bruit proprioceptif, gripper pads, etc.), soit 210 conditions. Sur neuf modèles VLA évalués à 500 épisodes par condition, le succès passe de 0,932 à 0,767 à sévérité intermédiaire puis 0,509 à sévérité maximale. L'entraînement sur perturbations visuelles n'atténue pas les défauts laissant les images inchangées. Le benchmark et ses manifests sont publiés.