arXiv
Fellow suit ce sujet depuis juillet 2026 : 30 articles résumés en français, dont 3 jugés majeurs ou notables.
Toute l'actualité · 30 articles
Pourquoi le langage généré par l'IA est-il si difficile à comprendre ?
Une étude psycholinguistique montre que neuf modèles frontier ou quasi-frontier emploient plus de structures coûteuses à traiter que les humains, et avance une hypothèse d'optimisation pour la densité d'information.
Concevoir des Transformers pour les modèles de langage à diffusion continue
LangDiT, un Transformer pensé pour les modèles de langage à diffusion continue, réduit la perplexité de génération et établit un nouvel état de l'art sur OpenWebText.
Continuum Attention : une attention causale par intégration sur une courbe mémoire continue
Un nouvel opérateur d'attention remplace la recherche discrète de clés et valeurs par une intégration sur une courbe linéaire par morceaux, et réduit la log-vraisemblance négative face au softmax.
UniEvo-VL : auto-amélioration des modèles multimodaux par auto-distillation
Un nouveau papier de recherche propose une méthode d'entraînement par auto-distillation pour faire progresser les modèles vision-langage sans supervision externe.
Context Language Models : une nouvelle approche pour les LLM
Un papier de recherche propose une architecture repensant la gestion du contexte dans les modèles de langage.
Penser vite et lentement en IA : le rôle de la métacognition (2021)
Un papier de 2021 explore comment doter les systèmes d'IA d'une métacognition inspirée du modèle dual de Kahneman, resurgi dans les discussions HN.
Des LLM à paramètres infinis générés à partir de données live
Une nouvelle méthode propose de générer et d'adapter les poids de modèles en continu via des données live.
Dépasser la barrière des 1.58 bits pour les LLM ternaires
Une nouvelle méthode de quantisation repousse les limites de compression des LLM ternaires sans perte significative de performance.
Une généralisation de la dualité bayésienne d'Amari
Les chercheurs réexaminent la dualité bayésienne d'Amari et la lient à la dualité convexe de la règle de Bayes.
Terminal-Universe : convertir les trajectoires d'agents en environnements terminaux scalables
Un framework transforme les historiques d'exécution d'agents en environnements reproductibles pour générer des tâches synthétiques et améliorer le post-training.
TTPO : optimisation de politiques au temps de test
Une méthode d'apprentissage sans étiquettes qui combine distillation et RL pour améliorer le raisonnement mathématique.
Crase : une exploration de graphes bornée pour la recherche scientifique augmentée
Un système de recherche documentaire académique borné et inspectable surpasse les agents de deep research propriétaires, à un tiers du coût.
E²-TTT : réconcilier expressivité et efficacité en Test-Time Training
Une nouvelle méthode TTT par blocs concilie expressivité dynamique et parallélisation matériel, tout en améliorant l'extrapolation de longueur.
Imputation de séries temporelles par diffusion masquée
Une méthode de diffusion masquée avec discrétisation stochastique améliore la robustesse de l'imputation.
TabNSM : Neural Sparse Mixer pour la régression tabulaire
Un nouveau framework scalable qui combine attention parcimonieuse et apprentissage de représentation pour exceller dans la régression sur données tabulaires complexes.
DARTree : speculative decoding par diffusion et arbres
Cette méthode sans entraînement accélère les LLM via des arbres de candidats parallèles, dépassant les vitesses des approches classiques.
Avantage quantique exponentiel pour l'apprentissage de signaux
Une étude démontre qu'un seul qubit couplé à un capteur classique réduit exponentiellement les mesures nécessaires.
Feuille de route quantique pour l'attention Softmax
Une analogie exacte de la règle de Born pour l'attention softmax sur le simplexe probabiliste.
sLTN : Structural Logic Tensor Networks
Une extension des Logic Tensor Networks intégrant les dimensions structurelles comme citoyennes de premier ordre.
Prédictions financières par génération de tokens
FinATOM utilise la génération de tokens contrainte pour unifier prévisions de rendement et allocation d'actifs.
SynthEx : planification stratégique de synthèse via LLM agents
Un framework agentic surpasse les algorithmes conventionnels pour concevoir des synthèses de produits naturels complexes.
SkillProx : Évolution de compétences agents par gradient textuel proximal
Une méthode améliore l'adaptation des agents LLM via un diagnostic en boucle fermée et un raffinement proximal.
Reasoning Core : données procédurales pour le raisonnement
Une collection de 50 générateurs pour l'entraînement supervisé par complétion, améliorant les performances sur DROP et ARC-Challenge.
Zero-Mem : opérations mémoire sans tokens pour agents LLM
Une méthode permet aux LLM agents de manipuler la mémoire externe sans consommer de tokens contexte.
ParVL : scaling parallèle pour MLLMs
Une nouvelle stratégie d'allocation de calcul dynamique entre vision et langage pour optimiser les MLLMs.
Value-of-Information pour le routing de mélanges LoRA
VI-MoLE optimise le routage dans les mélanges d'experts LoRA via l'allocation de valeur de l'information certifiée.
VAD : attribution visuelle pour la reconstruction de cibles
VAD isole les preuves visuelles dans la distillation multimodale on-policy pour améliorer la reconstruction des cibles.
DualG-MRAG : Découplage Macro-Raisonnement et Micro-Matching pour le MM-RAG
Une nouvelle architecture à deux niveaux sépare le raisonnement structurel global de la vérification locale pour améliorer le Multimodal RAG.
X³-OPD : distillation de raisonnement pour modèles audio-langage
Un nouveau cadre transfère le raisonnement logique de modèles textuels vers des modèles audio via un alignement on-policy.
Comment mesurer l'écriture générée par IA sur arXiv, et où la méthode atteint ses limites
Une analyse détaille les méthodes utilisées pour détecter le texte produit par IA dans les papiers arXiv, et souligne leurs failles.