Новая нейронка Google Dreamix позволяет изменять видео по описанию и анимировать фотографии

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

На фоне развития Искусственного интерфейса и нейронных сетей отметились множество инновационных проектов. Техно-гигант Google представил новую нейронную сеть, которая способна дополнять короткие видео по заданным словам в описании. 

Для создания искусства достаточно просто загрузить короткое видео и написать в задании, что бы вы хотели получить на видео. Презентация публикует пример, когда из видео с обезьянкой получается танцующий медведь.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4

Допустим вам не хватает, что орангутан на вашем видео не машет вам руками, просто делаем Запрос в форму нейросети и получится чудо.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4

Можно заставить старый стоящий на дороге пикап переезжать вброд реку. 

Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4
Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4

Также нейросеть умеет делать короткое видео из картинки. Так выглядит фотография, к которой создан запрос на создание видео медведя гризли на фоне исходной фотографии

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4

Чтобы видео было более детальным можно загрузить сразу несколько фотографий, чтобы нейросеть могла немного свободнее преображать изображение в видео. 

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4

Далее в презентации даже следует объяснение алгоритма работы нейросети

https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png
https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png

Данная нейросеть является разработкой Google Research и когда она будет доступна массовому пользователю пока неизвестно, тем не менее, мы видим прогресс в развитии искусственного интеллекта. 

Источник: dreamix

4 комментария

Добавить комментарий

4
Пиши исчо! Хоть кто-то адекватный и грамотный есть в этом вашем лайве! ;-))
Ибо 95 ℅ авторов генерируют низкопробный мусор уровня пятиклассника.
420922644@vkontakte
Любопытная информация

Добавить комментарий

Сейчас на главной

Новости

Публикации

Почему повербанк на 10 000 мАч не может зарядить смартфон с аккумулятором 5000 мАч два раза

Казалось бы, математика элементарная: делим 10 000 на 5 000 и получаем ровно две полные зарядки. Но в реальности новенький повербанк заряжает такой смартфон от силы полтора раза.Многие сразу...

Почему водители ЗИЛ-131 перед глубоким бродом специально открывали двери кабины

ЗИЛ-131 считается одним из самых проходимых советских грузовиков. Полноприводная схема 6x6, три ведущих моста, большие односкатные колёса, понижающая передача в раздаточной коробке и...

✦ ИИ  «Зачем его менять? Оно же работает». Почему заводы в России держатся за советские станки

Почему капремонт массивной станины советского 16К20 экономически выгоднее покупки нового обрабатывающего центра с ЧПУ за десятки миллионов? Дело не в ностальгии...

С острова убрали кошек ради спасения птиц — и неожиданно получили взрыв численности кроликов

Остров Маккуори лежит между Тасманией и Антарктидой. Холодный ветер, мокрый снег, торфяные склоны и огромные колонии морских птиц кажутся плохим местом для домашних кошек и европейских кроликов. Но...

Почему у приемника высшего класса «Ленинград-010-стерео» было так много шкал

В конце 1970-х годов советская радиопромышленность выпустила стереофонический приёмник, относившихся к высшему (нулевому) классу сложности. Его внешний вид сразу бросается в глаза: массивный...

Свет в конце тоннеля по ГОСТу: почему видения на грани жизни подчиняются странным правилам геометрии

Особые пограничные состояния сознания, которые в науке принято называть околосмертным опытом (Near-Death Experiences, или сокращенно NDE), возникают у людей в моменты пиковых физических или...