«Яндекс» представил новую версию ИИ-модели YandexART — она может генерировать короткие видео с движущимися объектами

До этого с её помощью можно было создавать анимации, которые «выглядели так, будто двигалась камера, но не объект».

Бета-версия нейросети YandexART (Vi) доступна в приложении «Шедеврум», рассказали в компании. Она способна генерировать пятисекундные видео по текстовому описанию.
После получения запроса модель создаёт картинку, с которой будет начинаться ролик. Затем она постепенно превращает цифровой шум в последовательность кадров, опираясь на изображение и промпт пользователя.
По словам компании, модель научилась учитывать связь между кадрами, что позволяет ей генерировать более реалистичные и плавные видео с движущимися объектами — например, бег собаки, падение листа с дерева или взрыв фейерверка.

Ролики сгенерированны YandexART (Vi)

Предыдущая версия YandexART, выпущенная в августе 2023 года, могла создавать анимации, которые «выглядели так, будто двигалась камера, но не объект», отмечают в «Яндексе».