Adobe анонсировала революционные Firefly-инструменты для видеомонтажа и синтеза видео

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Новость | ИИ, сервисы и приложения

Adobe делает решительный шаг в будущее видеопроизводства, анонсировав новые AI-инструменты на базе технологии Firefly. Компания представила впечатляющий набор возможностей, которые должны выйти в бета-версии до конца этого года.

Автор: LeVK
  1. Среди главных новинок — функция Text-to-Video, позволяющая создавать видеоролики на основе текстовых описаний. Эта технология обещает стать незаменимым инструментом для создания видеозаставок и рекламных роликов без необходимости дорогостоящих съемок.
  2. Другая многообещающая функция — Generative Extend — предназначена для заполнения пробелов в отснятом материале. Она сможет плавно соединять разрозненные фрагменты видео, создавая иллюзию непрерывной съемки. Эта возможность может оказаться особенно полезной при работе с ограниченным количеством исходного материала.
  3. Третий инструмент — Image-to-Video — позволит превращать статичные изображения в динамичные видеоролики. Adobe продемонстрировала впечатляющий пример, где фотография галактики трансформируется в видео, постепенно переходящее в изображение человеческого глаза.

Особого внимания заслуживает функция Text-to-Video, позволяющая создавать видеоконтент с нуля, используя лишь текстовое описание. Пользователи смогут не только генерировать базовые сцены, но и контролировать такие параметры, как угол камеры, движение и масштабирование. Демонстрационные ролики, представленные Adobe, впечатляют своим качеством и реалистичностью — от извергающегося вулкана до фантастических сцен с танцующими шерстяными монстрами.

Adobe заявляет, что их модель Firefly Video Model обучена только на контенте из базы данных Adobe Stock, содержащей 400 миллионов изображений, иллюстраций и видео, что должно обеспечить коммерческую безопасность использования сгенерированного контента. Компания также подчеркивает, что никогда не обучает свои модели на пользовательских работах.

Стоит отметить, что выпуск этих инструментов может рассматриваться как стратегический ход Adobe в борьбе с растущей конкуренцией со стороны бесплатных альтернатив их программам. Хотя у генератора изображений Firefly есть конкуренты вроде Stable Diffusion и Flux, в области создания видео на основе текста или изображения пока нет сопоставимых решений, даже коммерческих. Это дает Adobe значительное преимущество и потенциал для привлечения новых пользователей.

На данный момент новые инструменты будут ограничены созданием 5-секундных клипов, но даже это может стать значительным прорывом в индустрии. Adobe открыла список ожидания для желающих протестировать бета-версию этих инструментов, которая должна стать доступной позднее в этом году.

Источник: Engadget

Автор не входит в состав редакции iXBT.com (подробнее »)
Об авторе
Наношу добро, причиняю пользу, благодарен за лайки и содержательные (дополняющие статьи) комментарии.

1 комментарий

1
Интересно, будет ли для хоть этих функций использоваться NPU?

Добавить комментарий

Сейчас на главной

Новости

Публикации

Подготовьте окна к морозам за один вечер: 3 простых шага без лишних затрат

Как подготовить пластиковые окна к зиме: 3 простых шага, которые помогут сохранить тепло в доме. С наступлением теплой весны и лета мы привыкаем постоянно держать окна открытыми или на...

Студлагил: чудо природы, которое Исландия скрывала веками

Почти все достопримечательности мира уже стоят на планете столетиями, а то и тысячелетиями, и новые открываются довольно редко. Обычно они все рукотворные, из того, что только-только построили в...

Почему первый кислород чуть не погубил планету: как химия океана спасала биосферу от собственного открытия

История появления кислорода на Земле долгое время казалась последовательным процессом: фотосинтезирующие одноклеточные организмы выделили достаточное количество газа, окислили горные породы и...

Как черные дыры управляют атмосферой галактик: раскрыт скрытый механизм работы релятивистских джетов

Во Вселенной существует множество массивных галактик, в которых процесс образования новых звезд полностью прекратился миллиарды лет назад. Астрономы называют такие системы «погасшими» или...

Как осьминоги научились пользоваться зеркалами для охоты

Линии развития позвоночных животных и головоногих моллюсков разделились свыше 520 миллионов лет назад. В тот исторический период у общего предка этих организмов еще не существовало сложной...

Почему лось выходит на дорогу и лижет её, хотя вокруг полно еды

В лесу хватает побегов и листьев, а лось стоит посреди дороги и лижет её. Со стороны кажется, будто он перепутал асфальт с чем-то съедобным. Я и сама сперва задалась вопросом: зачем ему дорога,...