Новая нейронка Google Dreamix позволяет изменять видео по описанию и анимировать фотографии

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

На фоне развития Искусственного интерфейса и нейронных сетей отметились множество инновационных проектов. Техно-гигант Google представил новую нейронную сеть, которая способна дополнять короткие видео по заданным словам в описании. 

Для создания искусства достаточно просто загрузить короткое видео и написать в задании, что бы вы хотели получить на видео. Презентация публикует пример, когда из видео с обезьянкой получается танцующий медведь.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4

Допустим вам не хватает, что орангутан на вашем видео не машет вам руками, просто делаем Запрос в форму нейросети и получится чудо.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4

Можно заставить старый стоящий на дороге пикап переезжать вброд реку. 

Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4
Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4

Также нейросеть умеет делать короткое видео из картинки. Так выглядит фотография, к которой создан запрос на создание видео медведя гризли на фоне исходной фотографии

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4

Чтобы видео было более детальным можно загрузить сразу несколько фотографий, чтобы нейросеть могла немного свободнее преображать изображение в видео. 

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4

Далее в презентации даже следует объяснение алгоритма работы нейросети

https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png
https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png

Данная нейросеть является разработкой Google Research и когда она будет доступна массовому пользователю пока неизвестно, тем не менее, мы видим прогресс в развитии искусственного интеллекта. 

Источник: dreamix

4 комментария

Добавить комментарий

4
Пиши исчо! Хоть кто-то адекватный и грамотный есть в этом вашем лайве! ;-))
Ибо 95 ℅ авторов генерируют низкопробный мусор уровня пятиклассника.
420922644@vkontakte
Любопытная информация

Добавить комментарий

Сейчас на главной

Новости

Публикации

✦ ИИ  «Зачем его менять? Оно же работает». Почему заводы в России держатся за советские станки

Почему капремонт массивной станины советского 16К20 экономически выгоднее покупки нового обрабатывающего центра с ЧПУ за десятки миллионов? Дело не в ностальгии...

С острова убрали кошек ради спасения птиц — и неожиданно получили взрыв численности кроликов

Остров Маккуори лежит между Тасманией и Антарктидой. Холодный ветер, мокрый снег, торфяные склоны и огромные колонии морских птиц кажутся плохим местом для домашних кошек и европейских кроликов. Но...

Почему у приемника высшего класса «Ленинград-010-стерео» было так много шкал

В конце 1970-х годов советская радиопромышленность выпустила стереофонический приёмник, относившихся к высшему (нулевому) классу сложности. Его внешний вид сразу бросается в глаза: массивный...

Свет в конце тоннеля по ГОСТу: почему видения на грани жизни подчиняются странным правилам геометрии

Особые пограничные состояния сознания, которые в науке принято называть околосмертным опытом (Near-Death Experiences, или сокращенно NDE), возникают у людей в моменты пиковых физических или...

Как появились первые континенты и почему без Луны Земля осталась бы без суши

Четыре с половиной миллиарда лет назад Земля пережила крупнейшую катастрофу в своей истории — столкновение с массивным небесным телом размером с Марс. Этот удар расплавил наружные слои...

Влад Цепеш и граф Дракула: что известно о реальном правителе и откуда взялся вампир

Реальный Влад Цепеш не знал про вампиров, а Стокер, похоже, взял у него только имя. Разбираем, что известно о правителе Валахии и откуда взялся граф Дракула.