Новая нейронка Google Dreamix позволяет изменять видео по описанию и анимировать фотографии

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

На фоне развития Искусственного интерфейса и нейронных сетей отметились множество инновационных проектов. Техно-гигант Google представил новую нейронную сеть, которая способна дополнять короткие видео по заданным словам в описании. 

Для создания искусства достаточно просто загрузить короткое видео и написать в задании, что бы вы хотели получить на видео. Презентация публикует пример, когда из видео с обезьянкой получается танцующий медведь.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4

Допустим вам не хватает, что орангутан на вашем видео не машет вам руками, просто делаем Запрос в форму нейросети и получится чудо.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4

Можно заставить старый стоящий на дороге пикап переезжать вброд реку. 

Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4
Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4

Также нейросеть умеет делать короткое видео из картинки. Так выглядит фотография, к которой создан запрос на создание видео медведя гризли на фоне исходной фотографии

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4

Чтобы видео было более детальным можно загрузить сразу несколько фотографий, чтобы нейросеть могла немного свободнее преображать изображение в видео. 

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4

Далее в презентации даже следует объяснение алгоритма работы нейросети

https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png
https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png

Данная нейросеть является разработкой Google Research и когда она будет доступна массовому пользователю пока неизвестно, тем не менее, мы видим прогресс в развитии искусственного интеллекта. 

Источник: dreamix

4 комментария

Добавить комментарий

4
Пиши исчо! Хоть кто-то адекватный и грамотный есть в этом вашем лайве! ;-))
Ибо 95 ℅ авторов генерируют низкопробный мусор уровня пятиклассника.
420922644@vkontakte
Любопытная информация

Добавить комментарий

Сейчас на главной

Новости

Публикации

Лакса: как китайские и малайские традиции встретились в одной пряной миске лапши

Лакса выглядит как блюдо, которое невозможно разложить по одной культурной полке. В миске лежит китайская по форме лапша, вокруг неё — бульон с кокосовым молоком или тамариндовой...

Обзор наушников Radiotehnika TD17C

В современном мире снова наблюдается рост популярности проводных наушников и портативных плееров. На мой взгляд, существует несколько объяснений этого тренда: от желания послушать любимую музыку...

✦ ИИ  Может ли один грузчик за смену разгрузить фуру муки: считаем энергию, нагрузку на позвоночник и нормы

Может ли один грузчик за смену разгрузить фуру муки, 400 мешков по 50 кг: считаем расход энергии, нагрузку на поясничный диск и нормы 753н и 817н.

Вы никогда не видели настоящий мир: неуютная правда о том, как наш мозг придумывает цвета

В 1993 году американская писательница Лоис Лоури опубликовала роман «Дающий». Книга описывает общество будущего, в котором искусственно устранили любые различия между людьми ради всеобщего...

Почему вода в раковине иногда уходит медленно, хотя слив чистый?

Гора грязной посуды растёт, а вы стоите и ждёте, пока из раковины наконец уйдёт вода. Вроде бы слив чистый, куски еды в отверстии не застряли, но мойка постепенно превращается в маленький...