RECHERCHE
LittleLearner : LLM entraîné sur un corpus pédagogique restreint
Un modèle de 5 milliards de paramètres entraîné exclusivement sur du contenu de primaire pour étudier l'acquisition de connaissances.
arXiv·Fanfei Li, Jana Zeller, Manuel Prada-Corral, Thaddäus Wiedemer·13 août 2026
Sources : arXiv (source primaire), littlelearner-ll.github.io

Image · Source originale
Les chercheurs introduisent LITTLELEARNER, un modèle de 5B paramètres entraîné sur un corpus de 88B tokens limité au programme scolaire élémentaire américain. Ce « bac à sable » restreint permet d'étudier précisément l'acquisition de compétences sans contamination par des données avancées. Les expériences montrent que l'injection de nouvelles connaissances n'étend pas les capacités hors scope.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Fiche LittleLearner : prix API, sorties et articles
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Combien vaut un token d'IA ? Lois d'échelle pour le texte web généré par IA en conditions réelles30 septembre 2026
- Les données de Common Crawl désormais hébergées sur Hugging Face16 septembre 2026
- Dust : pré-entraîner des transformers sans rétropropagation5 octobre 2026
- Stanford EDGAR Filings Dataset : des documents SEC reconvertis en données d'entraînement longue portée16 juin 2026
- L'ELR pilote la dynamique de perte du pré-entraînement25 août 2026
- Co-LMLM : des LLM à mémoire limitée avec requêtes continues8 juillet 2026