L'attention comme théorie de jauge sur réseau : les relations n'interagissent qu'à travers les boucles de Wilson

Si le repère de chaque entité peut être tourné indépendamment, des relations sans cycle commun ne peuvent pas interagir, et le seul score invariant d'un triangle est une fonction de classe de son holonomie. La mise à jour équivariante d'une arête est alors U = Ψ(H)·T_ij. Instanciée sous le nom de holonomy attention, la méthode infère sans entraînement des relations S_4 non observées à 0,88 avec un cinquième des arêtes corrompues, là où les architectures commutatives plafonnent à 0,083.