VBench: Amplitude du mouvement

VBench: Amplitude du mouvement est une dimension de la suite publique VBench, créée en 2023 par Ziqi Huang et l’équipe Vchitect pour évaluer les modèles de génération vidéo.

À partir de prompts textuels en anglais, le benchmark mesure automatiquement le degré de mouvement visible dans les vidéos générées, notamment au moyen de l’amplitude du mouvement et du flux optique. Il permet ainsi de distinguer les modèles capables de produire des séquences amples et dynamiques de ceux qui génèrent des contenus quasi statiques.

Carte d'identité

Métadonnées descriptives pré-renseignées automatiquement, en cours de relecture éditoriale.

Classement des modèles (62)

Classement établi sur 62 modèles évalués, dont 6 de grands éditeurs. Score médian de l'ensemble : 60,2 %.

Notre analyse

Un score élevé indique qu’un modèle produit généralement des mouvements plus amples selon la mesure automatique normalisée. Il ne constitue toutefois pas, à lui seul, une évaluation globale de la qualité vidéo ou de la cohérence, VBench traitant ces aspects dans plusieurs dimensions distinctes. La fiabilité est renforcée par des scores au moins partiellement mesurés par un tiers, plutôt que seulement auto-déclarés.

Sur les 62 modèles recensés, la médiane de 60 % traduit des écarts substantiels de dynamisme. JT3.5 atteint 100 %, ce qui place ce modèle en tête, mais illustre aussi un risque de saturation de la métrique au sommet, où un score maximal ne permet plus de distinguer d’éventuels progrès supplémentaires. La portée reste centrée sur des prompts anglais et sur l’amplitude du mouvement. Enfin, le caractère public du benchmark peut favoriser une optimisation ciblée sur ses prompts ou sa métrique, ce qui invite à interpréter le classement comme un indicateur spécialisé plutôt que comme une mesure exhaustive des capacités de génération vidéo.

Sources des scores : vbench.