Rendre les modèles de langage cliniques auditables via un fine-tuning guidé par concepts

CAST est un cadre basé sur les Sparse Autoencoders qui expose des features interprétables issues des activations d'un Transformer clinique. Il identifie et supprime les artefacts liés au formatage des notes plutôt qu'à l'état réel du patient, tout en fournissant une traçabilité par concept. Sur MIMIC-IV, la méthode améliore les baselines d'encodeurs fine-tunés et reste compétitive face aux LLM.