DONDO : modèles ouverts de reconnaissance vocale w2v-BERT pour les langues africaines

DONDO est une famille de modèles ASR open-source basés sur w2v-BERT 2.0, comprenant 21 modèles monolingues et 5 multilingues pour 27 langues d'Afrique de l'Ouest et de l'Est. Entraînés sur des enregistrements de textes religieux, ils utilisent un fine-tuning en deux ou trois étapes avec annealing du learning rate et un mécanisme léger de conditionnement linguistique. Les modèles multilingues annealés atteignent 10-13% de WER, réduisant l'écart avec les modèles monolingues. Le tout est publié sur Hugging Face (KhayaAI) sous licence Apache-2.0.