VGI-Bench: проверка визуального интеллекта в моделях генерации видео
VGI-Bench объединяет 27 задач / 810 инстансов в двухуровневой таксономии доменов задач и скилл-тегов для проверки zero-shot визуальных рассуждений в сгенерированных видеокадрах. Самая сильная из оцененных генеративных систем (Seedance 2.0) набирает лишь 51.0% по предложенным критериям.
Почему это важно
HF Daily Papers за 27 августа — 143 апвоута; даёт принципиальную метрику для отличия world-model-подобных видеогенераторов от правдоподобных, но ненадёжных сэмплеров, и количественно оценивает, насколько текущие системы далеки от подлинного визуального рассуждения.
Важность: 3/5
notable release; official+media confirmation; HF Daily 143 upvotes
Источники
официальный
HF Daily Papers: VGI-Bench (143 upvotes)