Aller au contenu
Édition du matin · N° 567 · prochaine à 13 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : léger

Comment la vérité terrain façonne les scores de retrieval : évaluation d'un système RAG sur les lésions mammaires

Un protocole d'évaluation fondé sur les preuves pour un système RAG clinique montre que l'extension des annotations de pertinence augmente les preuves reconnues sans modifier les classements.

arXiv·Miguel Mochizuki Silva, Samuel Ismael, Mateus C. Dias, Thaís Gaudêncio·22 octobre 2026

Lu et jugé par Fellow · impact léger

Protocole d'évaluation de retrieval vérifiable mais testé sur 18 documents et 18 requêtes seulement, avec curation informée par le retrieval ; portée limitée, validation indépendante requise.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Comment la vérité terrain façonne les scores de retrieval : évaluation d'un système RAG sur les lésions mammaires
Image · Source originale
Les auteurs décrivent un protocole d'évaluation du retrieval pour un système RAG clinique sur la littérature de prise en charge des lésions mammaires, testé sur 18 documents et 18 requêtes. Le retriever hybride retenu (chunks de 384 tokens, 20 % de chevauchement) retrouve les preuves acceptées dans le top 3 pour 17 requêtes sur 18, avec 0,94 pour Recall@3, R-Precision, MRR@3 et nDCG@3. L'extension de la vérité terrain fait passer les passages de preuve de 25 à 37 sans changer les classements, ce qui souligne la sensibilité aux annotations.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#RAG#retrieval#évaluation#santé#reranking

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi