Новая нейронка Google Dreamix позволяет изменять видео по описанию и анимировать фотографии

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

На фоне развития Искусственного интерфейса и нейронных сетей отметились множество инновационных проектов. Техно-гигант Google представил новую нейронную сеть, которая способна дополнять короткие видео по заданным словам в описании. 

Для создания искусства достаточно просто загрузить короткое видео и написать в задании, что бы вы хотели получить на видео. Презентация публикует пример, когда из видео с обезьянкой получается танцующий медведь.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4

Допустим вам не хватает, что орангутан на вашем видео не машет вам руками, просто делаем Запрос в форму нейросети и получится чудо.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4

Можно заставить старый стоящий на дороге пикап переезжать вброд реку. 

Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4
Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4

Также нейросеть умеет делать короткое видео из картинки. Так выглядит фотография, к которой создан запрос на создание видео медведя гризли на фоне исходной фотографии

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4

Чтобы видео было более детальным можно загрузить сразу несколько фотографий, чтобы нейросеть могла немного свободнее преображать изображение в видео. 

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4

Далее в презентации даже следует объяснение алгоритма работы нейросети

https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png
https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png

Данная нейросеть является разработкой Google Research и когда она будет доступна массовому пользователю пока неизвестно, тем не менее, мы видим прогресс в развитии искусственного интеллекта. 

Источник: dreamix

4 комментария

Добавить комментарий

4
Пиши исчо! Хоть кто-то адекватный и грамотный есть в этом вашем лайве! ;-))
Ибо 95 ℅ авторов генерируют низкопробный мусор уровня пятиклассника.
420922644@vkontakte
Любопытная информация

Добавить комментарий

Сейчас на главной

Новости

Публикации

Почему в пустыне Атакама расцвели растения? Разбираем особенности природного явления

Пустыня Атакама считается одной из самых засушливых территорий планеты. Она состоит из скал, каменистых склонов и обширных пространств, где дождей не бывает годами. Однако в 2026 году пейзаж...

Природа изобрела пластик до людей: как пчелы делают биоразлагаемый «целлофан» и чему у них учатся ученые

Около трети всего пластика, который производят в мире — это полиэтилен. Из него делают пакеты, пищевую пленку, контейнеры и упаковку для товаров повседневного спроса. Этот материал стал...

«Феррари» отдала победу Ферстаппену, а Антонелли стал чемпионом: итоги Гран-при Мехико Формулы-1 2026 года

Сезон Формулы-1 2026 года постепенно подходит к своему завершению. Уже на девятнадцатом этапе стало известно имя чемпиона. Как прошёл Гран-при Мехико, как «Феррари» отдала победу Максу Ферстаппену...

Обзор Kiwi Ears AD1: недорогой ЦАП с поддержкой CTIA

Мы много говорим о разнообразных портативных ЦАПах, однако пока ещё не касались предельно компактных, легких и недорогих решений на чипах от не особо именитых компаний. При том, что последние уже...

Создан компьютер из живых бактерий: как деление клеток в микроканалах заменяет работу процессора

В математике и программировании существует большой класс задач, которые легко сформулировать, но крайне трудно решить в большом масштабе. Их называют комбинаторными задачами полного перебора....

Парк Юрского периода ближе, чем кажется? Ученые нашли кровь динозавра возрастом 115 млн лет

Международная группа исследователей опубликовала в научном журнале Proceedings of the National Academy of Sciences статью, которая вызвала серьезные споры среди палеонтологов. Авторы работы изучили...