Guidage sélectif par entropie : apprendre des politiques autonomes à partir de VLM enseignants imparfaits

Les chercheurs proposent SAGE, un framework qui n'interroge un VLM enseignant que lorsque l'agent apprenant est incertain, puis distille ce guidage dans une politique de renforcement légère. La méthode pondère les suggestions du VLM selon leur utilité réelle mesurée par les avantages de l'environnement plutôt que de les traiter uniformément. Sur des tâches de navigation et de raisonnement visuel à récompense rare, la politique apprise fonctionne sans VLM à l'évaluation et surpasse parfois son enseignant, tout en réduisant fortement les appels au VLM pendant l'entraînement.