Préserver pour étendre : adaptation sensible à la source et fusion de modèles pour l'ASR multilingue basée sur LLM

Les auteurs étudient l'extension de l'ASR multilingue dans des Speech LLMs à connecteur entraînable et LLM gelé, sans réutiliser les données d'entraînement des langues sources. En extension à une langue cible, le fine-tuning seul et le merging TIES standard provoquent un oubli sévère, tandis que SSU-Wanda+TIES offre le meilleur compromis. En extension multi-cibles, la fusion des mises à jour conserve de façon stable les langues sources, alors que l'expansion récursive dépend fortement de l'ordre.