IA4IA à l'inférence : transfert de capacités fort vers faible
Un modèle puissant peut-il booster un modèle faible à l'inférence sans entraînement ?
arXiv cs.AI · cs.LG · cs.CL·Cheng Qian, Wenting Zhao, Liangwei Yang, Heng Wang·12 août 2026

Image · Source originale
Cette étude explore le transfert de capacités d'un modèle fort vers un modèle faible directement au moment de l'inférence, sans mise à jour de paramètres. En utilisant des 'harness' (structures d'inférence) itératifs, les performances du modèle cible ont presque doublé sur des benchmarks Theory-of-Mind, atteignant 0.91 contre 0.49. Les gains proviennent principalement de l'externalisation du raisonnement instable vers du code déterministe et d'un formatage strict.