Les LLM biaisés par des heuristiques cognitives dans la détection de vulnérabilités

Des chercheurs ont exploré pour la première fois l'impact des heuristiques cognitives sur la détection de vulnérabilités par les LLMs. En maintenant le code constant et en faisant varier uniquement le contexte, ils ont induit trois biais : effet de halo (attribution d'auteur), effet de cadrage (objectifs de la tâche) et effet d'ancrage (résultats d'analyse préalables). Sur huit modèles testés, la susceptibilité moyenne est de 33,2 % pour le cadrage, 23,5 % pour l'ancrage et 18,4 % pour le halo. Les vulnérabilités nécessitant un raisonnement sémantique sont plus affectées que celles détectables par pattern matching.