«Яндекс» начал тестировать генерацию видео в «Шедевруме»

До этого в приложении можно было создавать только изображения и тексты к ним.

Чтобы сгенерировать видеоролик, нужно отправить текстовый запрос нейросети, рассказали vc.ru в «Яндексе». В ответ она предложит четыре варианта первого кадра и возьмёт за основу тот, который понравился пользователю больше всего.
После этого — «отрисует» набор изменённых версий первого кадра, чтобы «создать движение», и объединит всё выбранным эффектом. Последних семь: приближение, ускоренная перемотка, полёт, панорама, вращение, подъём и «морфинг» (постепенная трансформация).

Слева — пример анимации, справа — эффектов и кадров на выбор

Нейросеть генерирует отдельные изображения, которые затем объединяет в видео с частотой 24 кадра в секунду. Продолжительность итогового ролика — четыре секунды.
Видео можно сохранить в формате MP4, чтобы поделиться им с друзьями, вставить в музыкальный клип или любой другой видеоряд, а также чтобы использовать в качестве анимированного аватара.

Слева — пример эффектов, справа — анимации

Функцию пока тестируют, поэтому на момент публикации она доступна только «наиболее активным пользователям», говорится в приложении. Оценить результаты могут все в публичной ленте.

Пример анимации, которую увидел в ленте редактор vc.ru

«Яндекс» показал прототип нейросети для генерации изображений по текстовым запросам в апреле 2023 года — её обучали на 330 млн примеров пар картинок с текстовым описанием.
В июне компания также добавила в приложение нейросеть YandexGPT, чтобы пользователи могли создавать к картинкам тексты.