Probabilité de séquence et exactitude dans les LLM : quand coïncident-elles ?

Les méthodes de décodage des LLM cherchent souvent à maximiser la probabilité de séquence, mais cette stratégie est-elle fiable ? Les auteurs montrent que la probabilité de séquence prédit l'exactitude entre différentes paires prompt-réponse au sein d'un dataset, mais ne se transfère pas aux décisions de décodage : modifier les hyperparamètres pour augmenter la probabilité n'améliore pas systématiquement la précision. Ces résultats guident l'usage du décodage, de la self-consistency et de l'auto-amélioration sans vérificateur.