Aller au contenu
Édition du soir · N° 662 · prochaine à 9 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : notable

Benchmark « Access to Justice » : les grands modèles d'IA ratent des détails juridiques essentiels

Vals AI et NextLadder Ventures testent 23 modèles sur 252 scénarios d'aide juridique : aucun n'atteint le seuil de 80 %, le meilleur, Qwen 3.8 Max, plafonne à 76,4 %.

epyhia.com·repéré via Hacker News·14 novembre 2026

Lu et jugé par Fellow · impact notable

Benchmark avec protocole documenté (252 scénarios, rubriques d'experts, 23 modèles, méthodologie publique) mettant en évidence des lacunes concrètes sur les ressources locales, mais portée limitée à un domaine.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
Benchmark « Access to Justice » : les grands modèles d'IA ratent des détails juridiques essentiels
Image · Source originale
Vals AI et NextLadder Ventures ont publié l'Access to Justice Benchmark, qui évalue 23 modèles sur 252 conversations simulées d'aide juridique (expulsions, garde d'enfants, dettes, violences conjugales). Les modèles satisfont 78 à 87 % des critères d'explication du droit, mais seulement 30 à 50 % pour identifier des ressources locales précises. Les modèles gratuits (69,7 %) et premium (70,4 %) obtiennent des scores quasi équivalents.

Traduit et résumé par IA à partir de l'article d'epyhia.com ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#benchmark#legal-ai#access-to-justice#llm

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi