Adobe выпустила последнюю версию Firefly, которая теперь активно использует ИИ практически для всех аспектов постобработки видео и изображений. Обновленное приложение теперь может использовать ИИ для генерации закадровой озвучки, музыки, изображений и видеоклипов, а также помогать вам генерировать идеи и собирать клипы. Многие создатели контента могут найти использование ИИ для практически всех аспектов производства неприемлемым, но Adobe называет это «инструментом, а не заменой человеческого творчества».

До сих пор Firefly был в основном инструментом для создания контента, но теперь Adobe представила видеоредактор Firefly в закрытой бета-версии. Это веб-редактор с мультитрековой временной шкалой, очень похожий на Adobe Premiere Pro, который позволяет генерировать, организовывать, обрезать и монтировать клипы, с инструментами для добавления озвучки, саундтреков и титров. Вы можете организовывать существующий контент Firefly или создавать новый внутри редактора (с пресетами, такими как пластилиновая анимация, аниме и 2D), и комбинировать его с захваченным медиа. Все это можно редактировать с «покадровой точностью или через встроенную расшифровку», — говорится в сообщении Adobe.

Помимо видео, Firefly устраняет необходимость в озвучке и музыке, создаваемой людьми. Новая функция Adobe Generate Soundtrack (публичная бета-версия) — это музыкальный генератор на базе ИИ Firefly Audio Model, который позволяет выбрать стиль или сгенерировать его, чтобы он соответствовал любому загруженному клипу. Затем он точно синхронизирует его с этим видеорядом.

Generate Speech, тем временем, делает то же самое для закадровой озвучки. Он предоставляет выбор между Speech Model от Firefly и моделью от ElevenLabs, позволяя генерировать «реалистичные голоса на нескольких языках и тонко настраивать эмоции, темп и акценты для естественной, выразительной подачи».

Adobe также расширяет доступ к своему инструменту Fire!y Creative Production, начиная с закрытой бета-версии непосредственно в приложении Fire!y. Это полная система пакетной обработки изображений на базе ИИ, которая позволяет создателям объединять клипы, автоматически заменять фон, применять единообразную цветовую коррекцию и обрезать изображения с помощью интерфейса, управляемого запросами, без кода.

Затем идет Fire!y Boards — «инструмент для брейнсторминга на базе ИИ» для генерации новых концепций. Функция «Rotate Object» помогает преобразовывать 2D-изображения в 3D, позволяя позиционировать объекты и людей в разных позах и вращать их под разными углами. Еще две функции, экспорт в PDF и массовая загрузка изображений, ускоряют процесс обмена визуальными концепциями между проектами.

Наконец, Prompt to Edit (доступен сейчас в Firefly) — это диалоговый интерфейс редактирования, который позволяет использовать обычный язык для описания изменений, которые вы хотите внести в изображение, подобно тому, как вы используете инструменты text-to-image, такие как Midjourney, для создания новых изображений. Он доступен с последней версией AI Fire!y Image Model 5 от Adobe, а также с партнерскими моделями от Black Forest Labs, Google и OpenAI.

Поскольку Firefly теперь способен выполнять все аспекты продакшна с помощью ИИ, вы можете задаться вопросом, приведет ли это к волне несмотрибельного AI «slop» (низкокачественного контента, созданного ИИ) на YouTube и в других местах. Ответ — «вероятно», но это не обязательно будет дешево. Стоимость отдельных подписок Firefly составляет 10 долларов в месяц за базовый план (20 видео по 5 секунд), 20 долларов в месяц за план Pro (40 видео по 5 секунд) и 199 долларов за план Premium (неограниченное количество видео). Однако Adobe предлагает бесплатную генерацию изображений и видео (с некоторыми ограничениями) для всех клиентов Firefly и Creative Cloud Pro до 1 декабря. Все новые инструменты теперь доступны либо как часть обновления, либо в публичной бета-версии, либо в закрытой бета-версии, как указано выше.