Новая нейронка Google Dreamix позволяет изменять видео по описанию и анимировать фотографии

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Обычный топик | ИИ, сервисы и приложения

На фоне развития Искусственного интерфейса и нейронных сетей отметились множество инновационных проектов. Техно-гигант Google представил новую нейронную сеть, которая способна дополнять короткие видео по заданным словам в описании. 

Для создания искусства достаточно просто загрузить короткое видео и написать в задании, что бы вы хотели получить на видео. Презентация публикует пример, когда из видео с обезьянкой получается танцующий медведь.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4

Допустим вам не хватает, что орангутан на вашем видео не машет вам руками, просто делаем Запрос в форму нейросети и получится чудо.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4

Можно заставить старый стоящий на дороге пикап переезжать вброд реку. 

Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4
Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4

Также нейросеть умеет делать короткое видео из картинки. Так выглядит фотография, к которой создан запрос на создание видео медведя гризли на фоне исходной фотографии

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4

Чтобы видео было более детальным можно загрузить сразу несколько фотографий, чтобы нейросеть могла немного свободнее преображать изображение в видео. 

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4

Далее в презентации даже следует объяснение алгоритма работы нейросети

https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png
https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png

Данная нейросеть является разработкой Google Research и когда она будет доступна массовому пользователю пока неизвестно, тем не менее, мы видим прогресс в развитии искусственного интеллекта. 

Источник: dreamix

4 комментария

Добавить комментарий

4
Пиши исчо! Хоть кто-то адекватный и грамотный есть в этом вашем лайве! ;-))
Ибо 95 ℅ авторов генерируют низкопробный мусор уровня пятиклассника.
420922644@vkontakte
Любопытная информация

Добавить комментарий

Сейчас на главной

Новости

Публикации

Вселенная возникла не за один этап: почему рождение космоса оказалось сложнее, чем думали

Согласно общепринятой космологической теории, в первые мгновения после своего возникновения Вселенная пережила фазу колоссального ускоренного расширения — инфляцию. За ничтожные доли...

Зачем СССР расселял енотовидную собаку, если теперь её винят в разносе бешенства?

Осенью на опушке леса, а порой и у деревенских огородов можно встретить зверя, похожего одновременно на енота и на лису: приземистое тело, короткие лапы, тёмная «маска» на морде. Это енотовидная...

Как работает эволюция без естественного отбора: математики нашли скрытую причину устойчивости жизни

В стандартной теории эволюции главное правило формулируется просто: естественный отбор направляет развитие популяций исключительно туда, где возрастают шансы на выживание и размножение. Если...

Почему кошка приносит мышь или птицу домой: правда ли это подарок хозяину

Когда кошка кладёт мышь посреди кухни, происходящее выглядит почти как демонстрация. Вот её находка, а вот хозяин, который явно не готов оценить старания. Легко решить, что питомец принёс подарок...

Что если время в квантовом мире подчиняется другим законам? Физики придумали опыт, который это проверит

В фундаментальной физике существует глубокий внутренний конфликт, который остается нерешенным на протяжении целого века. Он связан с тем, как квантовая механика описывает физические величины.Когда...

Самая роскошная заброшка мира: почему Форест-Сити годами простаивает без жителей

От самого слова «заброшка» веет старыми панельками с разбитыми окнами, обветшалым видом, грязью и заброшенностью. Форест-Сити же, если взглянуть на фотографии, выглядит как ультрасовременный...