Relay-OPD : une méthode de distillation on-policy qui corrige les trajectoires de raisonnement défaillantes

Les chercheurs identifient une asymétrie entre enseignant et élève lorsque ce dernier s'engage sur une mauvaise direction de raisonnement. Relay-OPD exploite cette asymétrie comme déclencheur pour faire intervenir brièvement l'enseignant avant de rendre la main à l'élève. Testée avec Qwen3, la méthode dépasse l'OPD standard de +5,73% et réduit la longueur des trajectoires d'entraînement de plus de 50%.