Adobe представила новые генеративные AI-инструменты для видео, включая функцию, которая может создавать видеоролики из статичных изображений. Этот последний превью продолжает разработку модели видео Firefly, которую гигант программного обеспечения продемонстрировал в апреле и которая будет использоваться для создания функций редактирования видео и аудио с помощью искусственного интеллекта в приложениях Creative Cloud от Adobe.
Новое рекламное видео показывает материал, созданный с помощью возможностей текст-в-видео Firefly, о которых Adobe объявила ранее в этом году. Инструмент позволяет пользователям генерировать видеоролики, используя текстовые описания, и регулировать результаты с помощью различных “камерных контролов”, которые имитируют углы обзора камеры, движение и дистанцию съемки. Также была продемонстрирована функция изображение-в-видео для модели видео Firefly, которая может создавать ролики с использованием конкретных изображений-референсов. Adobe предлагает, что это может быть полезно для создания дополнительного B-ролика или заполнения пробелов в производственных графиках.
Новый AI-инструмент для видео от Adobe позволит пользователям выбирать предустановленные стили съемки для эмуляции, а также описывать желаемые кадры. Если примерный материал является индикатором окончательного релиза, качество созданного видео выглядит на уровне того, что мы видели от модели Sora от OpenAI, которую Adobe также “исследует” как стороннюю интеграцию для своего видео-программного обеспечения Premiere Pro. Однако продолжительность ограничена, с вице-президентом по генеративному AI в Adobe, Александром Костином, говорящим The Verge, что видеоролики, созданные функциями текст-в-видео и изображение-в-видео, имеют максимальную длительность в пять секунд. Одним из преимуществ собственной модели Adobe перед Sora может быть ее обещание, что Firefly “коммерчески безопасен” благодаря обучению на открытых лицензионных, общедоступных и контенте Adobe Stock, что может снизить некоторые опасения относительно нарушения авторских прав.
Функции текст-в-видео и изображение-в-видео сначала будут доступны в бета-версии как самостоятельное приложение Firefly в этом году. Adobe говорит, что новая модель видео Firefly в конечном итоге будет интегрирована в его приложения Creative Cloud, Experience Cloud и Adobe Express.
Компания также продемонстрировала несколько дополнительных роликов предстоящей функции “Generative Extend” для Premiere Pro, которая может увеличить длительность существующего видеоматериала, аналогично инструменту Generative Expand для фонов изображений в Photoshop. Adobe говорит, что это также появится в неопределенную дату “позже в этом году”.