RECHERCHE
PAPIERVerdict : légerMéthode d'ensemble pour estimer la confiance sans référence dans le résumé de code par LLM
Des chercheurs proposent d'estimer la justesse de résumés COBOL générés par LLM sans référence humaine, en exploitant l'accord entre modèles et un LLM-as-judge.
arXiv·Marco Colombo, Balaji A Jayaram, Sowmyakumari Selvaraj, Sumit Tokkar·6 novembre 2026
Lu et jugé par Fellow · impact léger
Article arXiv de 9 pages proposant une méthode d'ensemble pour estimer la justesse de résumés COBOL ; cas d'usage de niche, sans chiffres ni validation indépendante visibles dans le résumé.
Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
Image · Source originale
L'article décrit une approche et un cas d'usage pour estimer la justesse de résumés COBOL générés par LLM, sans références rédigées par des humains. Le principe : l'accord sémantique entre modèles est informatif sur la vérité, et un LLM-as-judge fournit des comparaisons par paires plus fidèles que les métriques fondées sur les chaînes ou les embeddings. La méthode combine génération contrôlée de résumés par des modèles variés, évaluateur LLM produisant des jugements structurés, et règle d'agrégation calibrée ne pénalisant que les contradictions corroborées.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
#LLM-as-judge#code-summarization#COBOL#confidence-estimation
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.