Adobe наконец-то выпустила собственный ИИ-генератор видео. Обзор нового инструмента
Сегодня компания Adobe сообщила, что ее ИИ-модель для генерации видео Firefly теперь находится в открытой бета-версии. Модель обучена только на полностью лицензированном контенте, что делает ее гораздо более безопасным вариантом в условиях постоянно растущей конкуренции генераторов видео на базе ИИ.
Если вы подписались на их программу раннего доступа, вы должны были получить уведомление о том, что Firefly теперь доступна для публичного использования.
У нас отличные новости - Generate Video (бета-версия) уже доступна. Generate Video (beta), основанный на модели Adobe Firefly Video Model, позволяет создавать новые, коммерчески безопасные видеоролики с легкостью творческого ИИ. Быстро донесите до зрителя свой творческий замысел, создайте би-ролл, чтобы заполнить пробелы, добавьте новые элементы в кадр и многое другое.
Телеграм-бот SYNTX предоставляет доступ к более чем 30 ИИ-инструментам. Без ВПН, оплата любой картой, запросы на любом языке, пробуйте бесплатно! В боте есть GPTo1, Gemini, Claude, Grok, Llama, Perplexity, DeepSeek, MidJourney, DALL-E 3, Flux, Ideogram и Recraft, LUMA, Runway, Kling, Sora, Pika, Hailuo AI (Minimax), Suno, синхронизатор губ, Редактор с 12 различными ИИ-инструментами для ретуши фото. ☝Это только часть функций, доступных в SYNTX!
Что такое генератор видео Firefly?
ИИ-генератор видео Adobe Firefly превращает текст или изображения в короткие видеоклипы. С помощью этого инструмента вы можете быстро создавать видеоролики, просто написав промпт или загрузив изображение. Инструмент генерирует 5-секундный видеоклип 1080p в формате MP4.
Помимо создания видеороликов, Adobe Firefly позволяет добавлять дополнительные эффекты. Вы можете дополнить свои клипы такими элементами, как дым, блики на объективе или простые движения камеры, которые придадут творческий характер вашим проектам.
Возможно, самое интересное в этом новом ИИ-инструменте то, что эти видео создаются с использованием лицензионного контента и контента, находящегося в общественном доступе, так что вам не придется беспокоиться о проблемах с авторскими правами.
Друзья, буду рад, если вы подпишетесь на мой телеграм-канал про нейросети и на канал с гайдами и советами по работе с нейросетями - я стараюсь делиться только полезной информацией.
Как использовать генератор видео Firefly?
Чтобы начать работу с генератором видео от Adobe, перейдите на сайт firefly.adobe.com и войдите в систему или создайте учетную запись. После входа в систему вы увидите набор ИИ-инструментов на вкладке Featured (см. изображение ниже). Нажмите на кнопку «Text to video», чтобы начать использовать инструмент для создания видео.
Вот как выглядит панель инструментов для создания видео:
Если вы уже пробовали использовать генератор изображений Firefly, вам должно быть знакомо, как устроен пользовательский интерфейс в этом инструменте. Давайте пока оставим все настройки по умолчанию и сгенерируем пример видео по промпту ниже:
An astronaut exploring Mars, dust storms in the background, and a red sunset.
В результате получается 5-секундный видеоролик в формате MP4 с разрешением 1920 × 1080.
Нужно не закрывать вкладку браузера до тех пор, пока видео не будет сгенерировано. Закрытие вкладки очищает сессию браузера, и весь прогресс создания видео будет потерян. Это немного странно, поскольку другие платформы, такие как Sora или Kling обрабатывают видео в облаке, поэтому вы можете закрыть вкладку браузера в любое время.
Кроме того, вот несколько советов по написанию промптов:
- Оптимальная структура текстового промпта - сначала нужно указать тип кадра, потом персонажа, действие, место действия и эстетику.
- Описывайте максимально точно, чтобы получить наилучшие результаты, не превышая максимальный лимит в 175 слов.
Например, “a cinematic, medium shot, eye level, of a beautiful fluffy rabbit in a snowy forest at sunrise, dreamy bokeh, lens flares, the color grade is warm, the rabbit is realistic with soft, detailed fur glistening in the sunlight, camera movement is subtle and soft and in slow motion, shot on film, film grain, snowflakes falling softly in the background, highly detailed.”
Видео из изображения
Еще одна классная вещь, которую вы можете сделать, - использовать референсное изображение для создания видео. Если у вас нет изображения со свободной лицензией, вы можете создать его с помощью Flux (я пользуюсь для генерации изображений этим ботом).
Имейте в виду, что вы не можете просто загрузить на платформу любое изображение. У вас должны быть права на это изображение. В противном случае ваш доступ может быть аннулирован.
Чтобы воспользоваться этой функцией, вы должны обладать правами на загруженные вами изображения третьих лиц. Все загружаемые изображения или создаваемый контент должны соответствовать нашим Правилам пользования. Доступ будет аннулирован за любое нарушение Руководства пользователя или за создание контента, наносящего вред другим людям.
Загрузите изображение в видеогенератор Firefly, добавьте описание видео и нажмите на кнопку Generate.
Вот сгенерированное видео:
На создание этого 5-секундного видеоролика ушло около 2 минут - немного медленнее, чем в Runway или Kling. Также вы можете добавить дополнительный финальный кадр, если хотите указать, как должно закончиться видео.
На панели слева вы можете настроить соотношение сторон, угол камеры и движение. А если хотите, добавьте в текстовый промпт больше деталей, чтобы создать совершенно новое видео. Только не забудьте сохранить понравившиеся видео перед тем, как создавать новые.
Больше примеров видео
Промпт: Miniature adorable monsters made out of wool and felt, dancing with each other, 3d render, octane, soft lighting, dreamy bokeh, cinematic.
Промпт: Cinematic closeup and detailed portrait of a reindeer in a snowy forest at sunset. The lighting is cinematic and gorgeous and soft and sun-kissed, with golden backlight and dreamy bokeh and lens flares. The color grade is cinematic and magical.
Промпт: Slow-motion fiery volcanic landscape, with lava spewing out of craters. the camera flies through the lava and lava splatters onto the lens. The lighting is cinematic and moody. The color grade is cinematic, dramatic, and high-contrast.
Промпт: Drone shot going between the trees of a snowy forest at sunset golden hour. The lighting is cinematic and gorgeous and soft and sun-kissed, with golden backlight and dreamy bokeh and lens flares. The color grade is cinematic and magical.
ИИ-модель Firefly также способна генерировать атмосферные элементы, такие как огонь, дым, частицы пыли и вода на черном или зеленом фоне, как в видео внизу.
Затем вы можете объединить сгенерированный ИИ-эффект с другим видео с помощью режимов наложения или кеинга в таких инструментах Adobe, как Premiere Pro и After Effects. Посмотрите на два примера видео ниже:
Вот как выглядит финальное видео:
Сколько стоит?
У Adobe Firefly есть два тарифных плана: Standard и Pro.
В обоих планах вам будет предоставлено 100 ГБ в облачном хранилище. Планы доступны как по ежемесячной подписке, так и по годовой предоплате с возможностью отмены в любое время без комиссии.
ИИ-генератор видео Adobe Firefly особо не выделяется среди своих конкурентов. Одним из самых значительных преимуществ является то, что Adobe обучила модель на своем собственном наборе данных. Это один из самых важных факторов, который способствует доверию к инструменту в вопросах ответственности за создание контента.
Кроме того, Adobe прилагает усилия для того, чтобы вы могли легко использовать сгенерированные видео в Premiere Pro и After Effects для дальнейшей стилизации и улучшения, и компания определенно работают над его улучшением.
Но, если быть честным, Adobe немного опоздала с релизом. Даже сейчас существует ряд новых генераторов видео на основе ИИ с уникальными возможностями.
Перед тем как принять решение о переходе на генератор видео Firefly, стоит его протестировать. Вы можете сгенерировать видео, используя предоставленные бесплатные кредиты, и проанализировать, как полученные результаты соотносятся с вашими другими любимыми ИИ-генераторами. Пока что инструменты, такие как Kling и Runway, по-прежнему остаются лучшими.
Телеграм-бот SYNTX предоставляет доступ к более чем 30 ИИ-инструментам. Без ВПН, оплата любой картой, запросы на любом языке, пробуйте бесплатно! В боте есть GPTo1, Gemini, Claude, Grok, Llama, Perplexity, DeepSeek, MidJourney, DALL-E 3, Flux, Ideogram и Recraft, LUMA, Runway, Kling, Sora, Pika, Hailuo AI (Minimax), Suno, синхронизатор губ, Редактор с 12 различными ИИ-инструментами для ретуши фото. ☝Это только часть функций, доступных в SYNTX!
Источник статьи на английском - здесь