RECHERCHE
BnBERT-iPET : modélisation few-shot parcimonieuse pour le bengali via l'élagage Lottery Ticket
Un modèle BERT élagué à 90% de parcimonie rivalise avec des modèles bien plus lourds pour le traitement du bengali, langue à ressources limitées.
arXiv cs.AI · cs.LG · cs.CL·Sajib Hossain, Md Kamrus Samad, Anan Ghosh, Labib Imam Chowdhury·5 août 2026
Image · Source originale
Les chercheurs présentent BnBERT-iPET, une approche few-shot combinant entraînement itératif par exploitation de patterns et élagage selon la Lottery Ticket Hypothesis. En ne conservant que 10% des connexions d'un modèle BERT initial, ce modèle allégé rivalise avec Bangla Electra, Indic-BERT et XLM-RoBERTa sur des tâches complexes en bengali, tout en réduisant fortement les coûts computationnels et l'empreinte carbone.
Chaleur 0
Pertinence 40
Nouveauté 55