Surveillance en ligne de la sûreté des LLMs

Malgré l'alignment training, les LLMs peuvent produire des sorties non sûres en production. Les chercheurs proposent un moniteur temps réel qui convertit le signal d'un modèle vérificateur externe en décision d'alerte via un seuillage calibré par contrôle du risque. Sur des jeux de données de raisonnement mathématique et de red teaming, ce design minimaliste rivalise avec des moniteurs reposant sur des tests d'hypothèse séquentiels plus sophistiqués.