Команда Kandinsky из Сбера открывает Time Adapter для видеогенерации с временной согласованностью

Sber

видео офиц. + СМИ 3 ист. ~1 мин

Команда Kandinsky из Сбера представила Time Adapter — лёгкий аддон менее 1% размера базовой модели, дающий видеогенеративным моделям явный контроль над частотой кадров (15–60 fps) и динамикой событий сцены. На Kandinsky 5.0 Video Lite он улучшил естественность движения на 29%, визуальное качество на 8% и точность следования промпту на 19%; код выпущен на Hugging Face под лицензией MIT, статья представлена на ICML.

Почему это важно

Временной контроль — известное слабое место видеодиффузионных моделей; крошечный plug-in модуль, исправляющий частоту кадров и динамику без переобучения базовой модели, — практичный вклад с открытой лицензией от российской лаборатории на площадке высшего уровня.

Важность: 2/5

Заметный open-source вклад в временной контроль видео, статья на ICML

kandinsky video-generation russia open-source

Источники

официальный Sber researchers teach neural networks to understand the passage of time in video generation

СМИ Researchers at Sber taught neural networks to understand the flow of time in video generation

СМИ Sber taught video neural networks to better understand the passage of time