Grad Detect : détection des hallucinations dans les LLMs par analyse des gradients

Grad Detect exploite les patterns de gradients internes d'un LLM lors d'un unique passage forward-backward pour détecter les hallucinations, sans recourir aux seuls signaux de sortie. Évalué sur plusieurs benchmarks Q&A, le système surpasse les approches basées sur la confiance et l'échantillonnage. Les études d'ablation révèlent que les cinq dernières couches concentrent plus de 97 % du signal discriminant, permettant un déploiement efficace avec une perte de performance minimale.