Bornes constructives pour l'expressivité topologique des réseaux de neurones

L'étude propose de mesurer l'expressivité topologique par les nombres de Betti de la sortie du réseau β(Φ(X)), plutôt que ceux de la frontière de décision, ce qui convient aussi à la régression. Les auteurs prouvent qu'un réseau ReLU d'architecture donnée peut exprimer des espaces homotopiquement équivalents à des sommes en bouquet de sphères avec des nombres de Betti arbitraires. Des bornes plus fines sont obtenues pour les produits de sphères, et une borne serrée (d,d+1,d+1) est conjecturée pour la sphère.