Нейросеть Genie 4 от Google научилась озвучивать интерактивные миры в реальном времени

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

Google DeepMind выпустила Genie 4 — обновлённую модель искусственного интеллекта для генерации интерактивных виртуальных миров. Главное нововведение — поддержка звука: нейросеть впервые в линейке Genie создаёт звуковое сопровождение одновременно с видеорядом сцены.

Система генерирует фоновые звуки — шум ветра, воды, окружающей обстановки — и позволяет персонажам разговаривать, реагируя голосом на команды пользователя или события в созданном мире. Всё это происходит в реальном времени, без задержек на обработку.

Помимо звука, Genie 4 даёт возможность менять содержимое сгенерированного мира прямо во время симуляции. Текстовыми командами пользователь может изменить погодные условия, переместить камеру, добавить объект или персонажа. При обработке запроса модель учитывает уже существующую сцену, чтобы изменения не нарушали общую картину.

Автор: deepmind. google Источник: deepmind.google

Разработчики также обновили физический движок. Genie 4 точнее воспроизводит столкновения объектов, аэродинамические эффекты и другие процессы. Поведение виртуальных персонажей стало реалистичнее: они естественно двигаются, реагируют на окружение и способны менять действия по ходу сцены.

Предыдущая версия, Genie 3, вышла в августе 2025 года и позволяла создавать интерактивные миры по текстовому запросу в разрешении 1280x720 пикселей с возможностью исследования в течение нескольких минут. В новой версии акцент сделан на связности происходящего, достоверной физике и взаимодействии с миром без задержек.

Genie 4 пока остаётся экспериментальной разработкой. Google предоставила доступ ограниченному кругу тестировщиков в формате исследовательского превью. Далее модель станет доступна подписчикам Google AI Ultra через раздел Project Genie, а партнёры компании протестируют её возможности через Gemini API и Google AI Studio.

Источник: 4pda

нет
Автор не входит в состав редакции iXBT.com (подробнее »)

Сейчас на главной

Новости

Публикации

Магнитофоны как искусство: 10 самых красивых кассетных дек за всю историю аудио

Во время расцвета компакт-кассеты деки были не просто источниками звука. Они становились центральным элементом аудиостойки, с подсветкой индикаторов, видимым движением ленты, тактильными клавишами...

Чтобы выжить в Австралии, местным змеям пришлось изменить свой размер: в противном случае они погибали от ядовитых жаб

В 1935 году в Австралию была завезена жаба-ага. Животное должно было бороться с жуками-вредителями, поедавшими сахарный тростник. Однако на деле получилось иначе. Жабы сами стали поедать местные...

Истрия АКПП в советских автомобилях

Автоматическая коробка передач в СССР была не просто технической новинкой, а символом другого автомобильного мира. В стране, где большинство водителей учились на «механике» и считали переключение...

Обзор наушников CKLVX Hydra: акустическая диковинка для агрессивной музыки

Ещё одна нестандартная в акустическом плане модель — это многообещающие CKLVX Hydra, созданные в коллаборации с русскоязычным блогером. Внутри у неё один 10 мм динамик, целых 6 балансных...

Погодная ловушка над полюсом: почему озоновая дыра в 2026 году выросла до максимума

Разбираем отчёт NASA и NOAA об антарктической озоновой дыре 2026 года. Как слабые воздушные волны и ледяные стратосферные облака заперли холод над Южным полюсом этой весной.

✦ ИИ  Огонь-невидимка: почему пламя водородной плиты меняет цвет в зависимости от погоды

Разбираем физику горения водорода в бытовых приборах. Почему чистый газ излучает в невидимом ультрафиолете, при чём здесь морской бриз и зачем будущим плитам датчики пламени.