Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte
Connexion

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.

Fellow
La veille de l'intelligence artificielle, en français
Rechercher⌘K
RECHERCHE
PAPIERVerdict : léger

Voir avant de synthétiser : détection d'événements de transition guidée par VLM pour le captioning vidéo dense faiblement supervisé

Un nouveau framework utilise un VLM pour générer des transitions vidéo ancrées visuellement, améliorant le captioning et la localisation d'événements.

arXiv·Ye-Chan Kim, Seunghee Choi, SeungJu Cha, Si-Woo Kim·3 septembre 2026

Lu et jugé par Fellow · impact léger

Amélioration incrémentale d'une méthode de captioning vidéo, acceptée à EMNLP mais sans portée au-delà d'un benchmark de niche.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Voir avant de synthétiser : détection d'événements de transition guidée par VLM pour le captioning vidéo dense faiblement supervisé
Image · Source originale
SBS propose une méthode qui exploite un VLM pour générer des narrations frame par frame entre événements et détecter les transitions via variation sémantique, plutôt que d'assigner des légendes de transition de façon rigide via LLM. Les masques temporels sont ensuite affinés en combinant point médian temporel et point de changement sémantique. La méthode atteint l'état de l'art sur ActivityNet Captions et YouCook2.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#video-captioning#VLM#weakly-supervised#vision-language

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi