Audit
Fellow suit ce sujet depuis juin 2026 : 18 articles résumés en français, dont 5 jugés majeurs ou notables.
Les sorties majeures
Un tiers des citations de Perplexity erronées
Audit indépendant sur 1 826 citations avec protocole vérifiable montrant 34,7 % de défauts sur Perplexity.
Toute l'actualité · 18 articles
Calibration de la difficulté dans le temps pour l'inférence d'appartenance dans les modèles de diffusion
Deux méthodes de calibration, selon le temps d'entraînement et le temps de diffusion, isolent la mémorisation de la difficulté intrinsèque des images pour auditer les données d'entraînement.
Décisions assistées par IA fiables grâce à l'audit sélectif
Des chercheurs proposent des algorithmes de monitoring en ligne qui décident quand solliciter un expert humain, avec garanties formelles sur la part d'erreurs de l'IA non auditées.
Anthropic fait le point sur ses évaluateurs indépendants et ouvre un accès élargi à METR
Anthropic donne à six employés de METR un accès comparable à celui de ses propres équipes d'évaluation des risques, et travaille aussi avec SecureBio et Accenture.
Les modèles d'IA peuvent dissimuler de façon prouvée des capacités arbitraires
Des chercheurs enfouissent des réseaux de neurones chiffrés dans les poids d'un modèle, activés par un déclencheur secret, et montrent les limites des audits de capacités par élicitation.
L'audit de sécurité à l'ère de l'IA « suffisamment bonne »
Trail of Bits analyse comment l'usage croissant d'outils IA dans le code impacte les pratiques d'audit de sécurité.
Un tiers des citations de Perplexity erronées
Un audit révèle que 30 % des références fournies par l'IA ne contiennent pas les données chiffrées indiquées.
Le maire affirme que de larges parties du rapport Deloitte ont été rédigées par IA
Un élu pointe l'utilisation intensive de l'IA dans un rapport commandé par la ville de Wellington.
Séparation Persona-Exécution : un patron d'architecture pour des agents LLM évolutifs sous audit d'exécution
Une architecture qui isole la personnalité changeante d'un agent LLM de son exécution auditée, testée sur une plateforme d'employé numérique régulée.
Anthropic permet la recherche indépendante sur l'usage réel de Claude
Le chercheur OpenAI se dit confiant quant à une AGI d'ici 2027, tout en soulignant les défis de sécurité.
Une théorie géométrique pour des audits d'équité robustes
Un cadre mathématique révèle comment de petites perturbations peuvent fausser les audits d'équité algorithmique basés sur le voisinage.
Quipu : un store de knowledge graphs gouverné et bitemporel
Quipu inverse les standards actuels pour des écritures d'agents sûres : gouvernance intégrée, confiance bitemporelle et audit natif.
AISPA : un cadre pour l'audit des system prompts
Des chercheurs proposent AISPA, une méthode pour auditer les instructions système des produits IA selon 8 dimensions.
Audit d'un framework d'agents IA sur les actions destructrices
Un développeur analyse les risques liés aux actions autonomes et conséquentes de son framework d'agents IA.
Audit RAG : 62% des étapes clés sont des artefacts
Une analyse de 1 751 jalons extraits par un système RAG révèle une majorité de données non pertinentes.
Méthodologie pour des niveaux de confiance auditables
Un cadre formel et une procédure légère pour documenter et surveiller la trustworthiness des systèmes IA tout au long de leur cycle de vie.
Knowledge Graphs et XAI : ressources complémentaires pour l'urban mining
Comment intégrer KG et XAI pour assurer la défensibilité des décisions dans les audits de démolition.
Un auditeur sans dépendance pour les enregistrements de décisions dans les systèmes touchés par l'IA
Un outil open-source pour auditer la traçabilité des décisions dans les pipelines IA, sans aucune dépendance externe.
Sur quels modèles nos LLM sont-ils construits ? Audit des dépendances invisibles
ModSleuth reconstruit automatiquement les graphes de dépendances des LLM modernes à partir d'artefacts publics, révélant obligations de licence et couplages cachés.