AVA-Encoder : vers une représentation vidéo native pour les agents IA

AVA-Encoder convertit une vidéo en graphe de connaissances structuré, combinant texte hiérarchique et couche d'assets (images, audio, vidéo), avant de la reconstruire. Un système d'optimisation par gradient textuel affine la politique d'encodage, en entraînement comme en test. Les auteurs rapportent un gain de 20,7 points face à la meilleure référence externe, avec une politique surpassant un réglage humain tout en réduisant de 74,3% les tokens de prompt système.