Hide and Seek : masquer des concepts pour expliquer les modèles de vision en boîte noire

Hide and Seek (HnS) est une méthode d'attribution au niveau des concepts pour les modèles de vision en boîte noire. Elle récupère des images alignées avec un concept via un modèle vision-langage, localise et masque le concept, puis mesure le changement de sortie du modèle. Validée sur CelebA et COCO-Stuff, elle concorde mieux avec les attributions de référence que les méthodes existantes et s'applique aussi à la génération de légendes et à la segmentation d'images satellites.