Новая нейронка Google Dreamix позволяет изменять видео по описанию и анимировать фотографии

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

На фоне развития Искусственного интерфейса и нейронных сетей отметились множество инновационных проектов. Техно-гигант Google представил новую нейронную сеть, которая способна дополнять короткие видео по заданным словам в описании. 

Для создания искусства достаточно просто загрузить короткое видео и написать в задании, что бы вы хотели получить на видео. Презентация публикует пример, когда из видео с обезьянкой получается танцующий медведь.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/banner_video.mp4

Допустим вам не хватает, что орангутан на вашем видео не машет вам руками, просто делаем Запрос в форму нейросети и получится чудо.

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/vid2vid_orangutan_hello2.mp4

Можно заставить старый стоящий на дороге пикап переезжать вброд реку. 

Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4
Скриншот из https://dreamix-video-editing.github.io/static/videos/vid2vid_truck_river.mp4

Также нейросеть умеет делать короткое видео из картинки. Так выглядит фотография, к которой создан запрос на создание видео медведя гризли на фоне исходной фотографии

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/img2vid_grizzly.mp4

Чтобы видео было более детальным можно загрузить сразу несколько фотографий, чтобы нейросеть могла немного свободнее преображать изображение в видео. 

Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4
Скриншот из видео https://dreamix-video-editing.github.io/static/videos/subj_driv_dancing.mp4

Далее в презентации даже следует объяснение алгоритма работы нейросети

https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png
https://dreamix-video-editing.github.io/static/images/architecture_applications_extended.png

Данная нейросеть является разработкой Google Research и когда она будет доступна массовому пользователю пока неизвестно, тем не менее, мы видим прогресс в развитии искусственного интеллекта. 

Источник: dreamix

4 комментария

Добавить комментарий

4
Пиши исчо! Хоть кто-то адекватный и грамотный есть в этом вашем лайве! ;-))
Ибо 95 ℅ авторов генерируют низкопробный мусор уровня пятиклассника.
420922644@vkontakte
Любопытная информация

Добавить комментарий

Сейчас на главной

Новости

Публикации

Где шерсть, котик? Почему одни кошки пушистые, а сфинксы лысые

Стоит поставить рядом пушистого мейн-куна и голого сфинкса, и трудно поверить, что перед нами представители одного семейства. У одного — густая шуба, роскошный хвост и даже мех между...

Три динамика на один канал: как советский магнитофон «Астра-4» создавал объемный звук без стерео

10 ноября 1966 года ленинградский завод «Техприбор» начал серийный выпуск катушечного магнитофона «Астра-4». Конструкторы разместили на фронтальной панели деревянного корпуса сразу три...

Почему в Москве двигали каменные дома целиком и как их снимали с фундамента

Некоторые московские дома переезжали на новое место вместе с жильцами и мебелью в квартирах. Здания сдвигали на десятки метров, сохраняя лестницы, перекрытия и работу инженерных сетей. Под...

Зачем плотине «Три ущелья» понадобился отдельный лифт для кораблей

У китайской плотины «Три ущелья» пассажирский теплоход может подняться на десятки метров внутри огромного сооружения с бетонными башнями. Всё это время он остаётся на плаву: под днищем сохраняется...

Как выбрать корпус для ПК: совместимость компонентов и особенности конструкции

Первым этапом при выборе корпуса становится определение форм-фактора материнской платы. Наиболее распространены варианты E-ATX, ATX, Micro-ATX и Mini-ITX, различающиеся габаритами и количеством...

Обзор проектора Wanbo X7 Pro Max: домашний кинотеатр, который не боится света

Wanbo X7 Pro Max — один из лучших проекторов в своей ценовой категории, который я тестировал. Он даёт яркую, сочную картинку, которую можно смотреть даже при свете.