Задача: генерировать видео/фото с одним и тем же персонажем в одном стиле.
Те, кто хоть раз пробовал генерировать видео или фото с условием, чтобы видео были в одном стиле и с похожим персонажем, знают, что это практически невозможно, поскольку сталкивались с этой проблемой лично. Ну ладно, возможно, но для этого надо тренировать модель, а это дополнительное время. Хотя не только это, есть еще вариант, просто с заменой лица. Иногда и этот случай тоже спасает.
Если вы тоже сталкиваетесь с этим каждый день, то рассказываю к чему мы пришли и как мы решаем эту задачу ежедневно. Генерим видео в едином стиле с похожими персонажами в SuperDuperAi
Отличительная черта и особенность этого сервиса — консистентность. Здесь подробно описано как натренировать модель, которая будет сохранять персонажа и стиль, и все ваши ролики всегда будут созданы с похожим персонажем и в одном стиле.
Кому подойдет:
- авторам книг для создания обложек и иллюстраций в едином стиле
- маркетинговым агентствам
- основателям стартапов
Выбирайте шаблон, исходя из того, что вы хотите сделать.
Для создания видео необходимо написать подробный промпт. Промпт можно написать самому, а можно попросить ChatGPT, иногда я прибегаю к его помощи при создании промптов для видео.
Обратите внимание, что под окном для написания промпта есть малозаметная кнопочка Auto mode. Если ползунок передвинуть вправо, то вам больше ничего делать не нужно — сервис всё сделает автоматически. Результат вам может не понравиться, но его в любой момент можно будет отредактировать.
После нажатия кнопки Next вы должны выбрать формат. Если это видео для соцсетей вертикальное, то надо выбирать 9х16. После каждого действия необходимо нажимать кнопку NEXT в правом нижнем углу.
Дальше программа сама прописывает скрипт (1-2 минуты) — герои, сцены, сценарий. В скрипте всё можно поменять, изменить и отредактировать вручную.
Я создаю историю про кошек, поэтому выбираю стиль Cats life
Сервис готовит Entities — примерные изображения героев и локаций. Они могут не совсем совпадать с теми, которые будут в итоговом видео. Если вы видите, что герой не похож на вашего персонажа, то можно изменить промпт.
Далее вы выбираете музыку из доступных или загружаете свою. Но можно и пропустить этот шаг
И начинается самый интересный момент — создаётся сториборд, то есть сам процесс генерации видео. Этот процесс может занимать 5-7 минут.
Первое видео будет в виде слайдшоу. На видео будет текст, музыка и фоновая озвучка — полный комплект.
Всё это можно отредактировать, удалить и поменять. Потом все картинки можно анимировать, используя Kling 1.6 и Minimax. Анимировать можно одной кнопкой сразу все картинки или каждую по отдельности. Для каждой сцены генерируется 3 варианта картинок.
Для редактирования каждой отдельной сцены необходимо зайти в саму сцену.
Здесь можно удалить или добавить текст, отключить фоновую музыку и озвучку, поменять голос. Если вам не нравится получившийся персонаж или вы считаете, что он не похож на вас, то можно его перегенерировать, используя inpainting. Все инструменты расположены на панельке справа.
Если вам не нравится сцена, то ее можно удалить , нажав на крестик в правом верхнем углу изображения сцены в Storybord. А также можно сгенерировать новую в любом месте.
Обратите внимание, что внизу есть кнопка Animate all, которая анимирует все слайды одновременно.
Редактировать можно бесконечно много раз, меняя промпт для оживления, выбирая другой стиль или просто попросив всё перегенерировать. Тогда может получится другое видео, даже если ничего не менять. Но лучше внести хотя бы небольшие изменения в промпт.
Итоговое видео можно скачать и поделиться им в соцсетях. Но перед скачиваем можно покрутить громкость музыки или озвучку и изменить зум.
На создание одного видео уходит примерно 30-40 кредитов. При регистрации вы получаете первые пробные кредиты, которых хватит на создание 2-3 видео.
Под капотом: генерация картинок, звуков, войсоверов, inpainting, монтаж, анимация — полный хаб.
Теперь у вас тоже будет все получаться быстрее и комфортнее.
Ещё больше про нейронные сети можно узнать в Telegram-канале Generative AI.