Précision plutôt que capacité : une nouvelle métrique pour évaluer les modèles d'IA en frontière

L'auteur soutient que les modèles de langage de pointe ont atteint un plafond de capacité mesurée par la précision moyenne des réponses. Il propose de mesurer plutôt la dispersion des sorties sur des tâches identiques répétées, une métrique de « précision » calculable sans juge automatique. Cette approche permettrait de distinguer les erreurs systématiques, corrigibles par ajustement opérationnel, des erreurs dispersées nécessitant un changement de modèle.