RECHERCHE
Silence structurel : l'IA exclut les langues sous-représentées
Les infrastructures de l'IA pénalisent structurellement le bengali et autres langues minoritaires dès la conception.
arXiv·Avijit Roy, Proma Roy·12 août 2026

Image · Source originale
Cette étude analyse comment les corpus d'entraînement, la tokenisation et l'architecture défavorisent les locuteurs de langues sous-représentées, comme le bengali, bien avant l'entraînement des modèles. Elle identifie quatre échecs interdépendants : un déficit de présence web, un déséquilibre massif de tokens, une pénalité de tokenisation et l'exclusion par la connectivité.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Des caractéristiques linguistiques pour une inférence textuelle interprétable21 septembre 2026
- Gzip peut-il faire office de modèle de langage ?22 septembre 2026
- MexHat : un jeu de données vidéo pour la détection de discours haineux en espagnol mexicain25 septembre 2026
- Validité des LLM comme annotateurs : AMALIA face au construit d'autorité9 juillet 2026
- Common Corpus : le plus grand corpus textuel ouvertPleias · 13 novembre 2024
- Gigatoken : un tokenizer présenté comme le plus rapide du marché22 juillet 2026