Apprendre à raisonner à partir de plusieurs « penseurs »

Ce travail analyse l'apprentissage supervisé par Chain-of-Thought (CoT) lorsque plusieurs « penseurs » fournissent des solutions correctes mais systématiquement différentes. Les auteurs démontrent que, sous hypothèses cryptographiques, l'apprentissage passif à partir de quelques penseurs peut être difficile. En revanche, ils proposent un algorithme d'apprentissage actif générique et efficace qui nécessite peu de données CoT par penseur, un nombre modéré de penseurs (en O(log 1/ε · log log 1/ε)) et des données passives de résultats finaux en O(1/ε · polylog 1/ε).