Adobe анонсировала революционные Firefly-инструменты для видеомонтажа и синтеза видео

Adobe делает решительный шаг в будущее видеопроизводства, анонсировав новые AI-инструменты на базе технологии Firefly. Компания представила впечатляющий набор возможностей, которые должны выйти в бета-версии до конца этого года.

1. Среди главных новинок — функция Text-to-Video, позволяющая создавать видеоролики на основе текстовых описаний. Эта технология обещает стать незаменимым инструментом для создания видеозаставок и рекламных роликов без необходимости дорогостоящих съемок.
2. Другая многообещающая функция — Generative Extend — предназначена для заполнения пробелов в отснятом материале. Она сможет плавно соединять разрозненные фрагменты видео, создавая иллюзию непрерывной съемки. Эта возможность может оказаться особенно полезной при работе с ограниченным количеством исходного материала.
3. Третий инструмент — Image-to-Video — позволит превращать статичные изображения в динамичные видеоролики. Adobe продемонстрировала впечатляющий пример, где фотография галактики трансформируется в видео, постепенно переходящее в изображение человеческого глаза.

Особого внимания заслуживает функция Text-to-Video, позволяющая создавать видеоконтент с нуля, используя лишь текстовое описание. Пользователи смогут не только генерировать базовые сцены, но и контролировать такие параметры, как угол камеры, движение и масштабирование. Демонстрационные ролики, представленные Adobe, впечатляют своим качеством и реалистичностью — от извергающегося вулкана до фантастических сцен с танцующими шерстяными монстрами.

Adobe заявляет, что их модель Firefly Video Model обучена только на контенте из базы данных Adobe Stock, содержащей 400 миллионов изображений, иллюстраций и видео, что должно обеспечить коммерческую безопасность использования сгенерированного контента. Компания также подчеркивает, что никогда не обучает свои модели на пользовательских работах.

Стоит отметить, что выпуск этих инструментов может рассматриваться как стратегический ход Adobe в борьбе с растущей конкуренцией со стороны бесплатных альтернатив их программам. Хотя у генератора изображений Firefly есть конкуренты вроде Stable Diffusion и Flux, в области создания видео на основе текста или изображения пока нет сопоставимых решений, даже коммерческих. Это дает Adobe значительное преимущество и потенциал для привлечения новых пользователей.

На данный момент новые инструменты будут ограничены созданием 5-секундных клипов, но даже это может стать значительным прорывом в индустрии. Adobe открыла список ожидания для желающих протестировать бета-версию этих инструментов, которая должна стать доступной позднее в этом году.

Источник: Engadget