Où émerge l'alignement et que signifie-t-il ? Un examen approfondi de l'hypothèse de la représentation platonicienne

L'étude examine où l'alignement émerge entre modèles unimodaux, selon les couches et les dimensions de représentation. La tendance capacité-alignement de la PRH se maintient pour les modèles récents lorsque les légendes sont suffisamment propres et informatives. Avec des baselines unimodales et multimodales, les auteurs montrent que l'alignement cross-modal de modèles unimodaux peut dépasser celui de modèles vision-langage explicitement alignés, mais reste nettement inférieur à l'alignement entre modèles de même modalité. Le code est disponible.