EpiSEM-Bench : évaluer la sécurité et la récupération de preuves des agents LLM en cas de preuves manquantes

EpiSEM-Bench est un benchmark exécutable de 300 paires de tâches sûres/non sûres couvrant six domaines. Il supprime systématiquement des faits critiques pour mesurer l'exécution non sûre et la cardinalité minimale de défaillance observée. Un outil d'audit indépendant vérifie si les agents recherchent les faits manquants. Sur dix modèles, la robustesse à l'omission, l'acquisition de preuves et l'action appropriée varient fortement ; l'accès à la récupération réduit l'exécution non sûre pour tous.