Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte
Connexion

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.

Fellow
La veille de l'intelligence artificielle, en français
Rechercher⌘K
RECHERCHE

OctoLong améliore le long-contexte via l'entrainement sur code

Un pipeline d'ingénierie de contexte et des modèles LLM open-weights performants pour le code longue portée.

arXiv·Indraneil Paul, Falko Helm, Goran Glavaš, Iryna Gurevych·5 août 2026
OctoLong améliore le long-contexte via l'entrainement sur code
Image · Source originale
OctoLong est un pipeline qui génère des contextes de code riches en dépendances pour l'entraînement de modèles long-contexte. En remplaçant 12% des corpus classiques par ces données, les modèles OctoLong-Instruct (600M à 14B paramètres) améliorent significativement la compréhension de code repository-level et le suivi d'état sur 18 benchmarks.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#llm#long-context#code-generation#open-weights#ast-parsing

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi