Apprentissage par renforcement avec auto-distillation on-policy à attribution visuelle

Le RLVR multimodal offre une supervision fiable au niveau de la tâche, mais guide peu la localisation des erreurs de raisonnement visuel. L'auto-distillation on-policy apporte des corrections denses par token, qui peuvent toutefois mêler preuve visuelle et effets non visuels (a priori linguistiques, style, vue privilégiée), ce que les auteurs nomment contamination des corrections privilégiées. Ils introduisent Visual-Attribution Gating (VAG), qui valide chaque correction par le contraste entre vues enseignantes avec et sans preuve visuelle dégradée, en s'ancrant sur l'avantage issu du vérificateur.