CMA-OT : supervision experte hiérarchique pour la génération de musique à partir de danse

Les auteurs proposent CMA-OT, un cadre exploitant un modèle musical expert externe pour superviser hiérarchiquement les représentations latentes d'un générateur dance-to-music. Une stratégie d'apprentissage curriculaire multi-échelle transfère progressivement les connaissances musicales, tandis qu'un mécanisme de transport optimal sensible à l'échelle aligne finement les représentations malgré les décalages temporels. L'approche vise à combler l'écart sémantique entre les indices de danse épars et la richesse structurelle requise en composition musicale.