RECHERCHE
PAPIERVerdict : légerBornes de Rademacher quasi-optimales pour les réseaux de neurones à activation parcimonieuse
Une étude théorique affine les bornes de complexité statistique des réseaux ReLU à faible activation, en éliminant le facteur de dimension explicite jusqu'aux logarithmes.
arXiv·Xiaoyu Li, Zhizhou Sha, Jiaojiao Jiang, Junbin Gao·8 septembre 2026
Lu et jugé par Fellow · impact léger
Résultat théorique de complexité statistique, incrémental et non validé empiriquement à large échelle.

Image · Source originale
Les chercheurs analysent la complexité statistique des réseaux ReLU à une couche cachée où chaque entrée n'active qu'un sous-ensemble d'unités. Ils établissent de nouvelles bornes de Rademacher quasi-optimales grâce à un argument de chaining normalisé, montrant l'importance du domaine d'entrée et des bornes sur les biais. Le travail aboutit également à des bornes de risque excédentaire minimax pour l'apprentissage agnostique.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Deux couches ReLU suffisent : simulation exacte de tout réseau ReLU20 octobre 2026
- Show HN : Compétition de petits réseaux de neurones pour jeux de stratégie20 septembre 2026
- J'ai construit un réseau de neurones à partir de mécaniques du jeu DOOM21 octobre 2026
- Apprentissage profond riemannien : modules, réseaux et géométries21 juillet 2026
- La structure symbolique émergente des réseaux de neurones artificiels2 septembre 2026
- Des réseaux de neurones 1-Lipschitz conçus pour les variétés de Hadamard21 juillet 2026