«Читая» ваши мысли, искусственный интеллект теперь способен генерировать изображения

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Статья | ИИ, сервисы и приложения

Новая технология на базе искусственного интеллекта может «читать» мысли. Это означает, что она может считывать ваши мозговые волны, определять, о чем вы думаете, и переводить их в изображение в очень высоком разрешении. Она настолько точна, что может даже улавливать формы и цвета. Исследователи из Высшей школы передовых биологических наук Университета Осаки в Японии использовали Stable Diffusion (стабильная диффузия), одну из самых известных систем искусственного интеллекта, генерирующих изображения.

Исследование, опубликованное в декабре прошлого года, состояло из показа различных изображений группе добровольцев. Эти изображения генерировали стимулы в активности мозга, которые ученые смогли зафиксировать благодаря сканированию с помощью МРТ. Полученная информация транслировалась с помощью семантических декодеров и, наконец, использовалась в качестве входных данных для создания окончательного изображения со стабильной диффузией.

Исследовательская группа утверждает, что она впервые использует инструмент генеративного искусственного интеллекта в качестве стабильной диффузии в эксперименте по «чтению» мыслей и созданию визуальных воссозданий активности мозга.

Как работает ИИ, который может «читать» мысли?

Команда Университета Осаки включила в публикацию своего исследования сравнение между изображениями, которые они показывали добровольцам, и теми, которые в конечном итоге были получены с помощью стабильной диффузии. Полученные изображения не совсем совпадают с оригиналами, но они воспроизводят большинство основных элементов. Например, формы, цвета и перспектива. Финальные картинки также различались между участниками, но это связано с тем, что у каждого человека свой способ интерпретации действительности.

Японской команде удалось «прочитать» мысли добровольцев не только благодаря искусственному интеллекту стабильной диффузии. В исследовании участвовали и другие ключевые процессы для преобразования активности мозга в данные, чтобы их можно было прочитать и использовать с помощью этого инструмента стабильной диффузии. Достоинством этого метода является упрощение создания графических представлений чрезвычайно высокого разрешения и семантической точности.

Исследователи признали, что в некоторых предыдущих исследованиях удалось получить изображения в высоком разрешении. Однако они объяснили, что это стало возможным после целого процесса «обучения и настройки» генеративных моделей, что является очень сложной задачей.

Университет Радбуда в Нидерландах, например, опубликовал в 2022 году, что им удалось обучить модель ИИ «читать» мысли. Метод был аналогичным. Они показывали разным участникам фотографии людей, генерировали информацию из МРТ-сканов и создавали новые изображения с помощью своей модели искусственного интеллекта.

Как работает искусственный интеллект Stable Diffusion?

Искусственный интеллект для «чтения» мыслей Университета Радбауд имел высокие требования по соответствию пола, возраста и позе людей на фотографиях. Но опять же, требовался «тренировочный» процесс, которого японская команда избежала благодаря стабильной диффузионной платформе, созданной компанией Stability AI.

Стабильная диффузия — это открытый исходный код, в отличие от аналогичных инструментов, таких как DALL-E. Она также имеет логику автоматического обучения: она предлагает все более точные результаты по мере использования.

Трио художников подали в суд на компанию в январе прошлого года за нарушение авторских прав «миллионов художников». В феврале этому примеру последовало американское фотоагентство Getty Images. Оно заверило, что Stable Diffusion использовала миллионы фотографий без разрешения агентства для создания своих изображений.

Источник: Researchers translate brain waves into scarily accurate images using Stable Diffusion AI

4 комментария

Добавить комментарий

1
Ой, чую, мысли большинства в приличном обществе показывать нельзя.
M
Сеть обучали на наборе Natural Scenes Dataset из 10 т. изображений. Вряд ли там сосны отсутствовали.
Другое дело, что это пока чисто исследовательская вещь, поскольку набор основан на фМРТ данных.
Я вижу здесь некоторую перспективу для исследования сновидений, учитывая, что они легко забываются. Правда это если вычислительные ресурсы позволят делать видео из отдельных статических картинок.
Alex_Bes
Тут может работать принцип как было в фильме «Начало». Вам скажут не думать о слонах, а вы только о них и будете думать какое-то время. Плюс, тут могли просить концентрироваться на ассоциациях, поэтому у участников могли возникать лишь похожие образы или его фрагменты.

Добавить комментарий

Сейчас на главной

Новости

Публикации

И для металла, и для поп-музыки. Гибридные наушники, которые смогли. Обзор TRN Shell

Похоже что мои поиски наушников с хорошим звуком завершились. 4 драйвера для высоких, средних и низких частот и отзывы, что звук как у гораздо более дорогих модели. Путь к этим гибридным TRN Shell...

Анатомия фастфуда: почему куриные стрипсы стоят вдвое дороже наггетсов

Представьте эту до боли знакомую сцену. Вы стоите у светящегося меню в ресторане быстрого питания или задумчиво разглядываете морозильный ларь в супермаркете. Перед вами два, казалось бы,...

Эта рыба умеет ходить по суше: 5 видов, которые выглядят как баг в реальности

Принято считать, что жизнь рыб строго ограничена водной средой. Однако эволюция сформировала виды, способные не только выживать на открытом воздухе, но и целенаправленно передвигаться по суше. Они...

✦ ИИ  Почему современным оптическим мышкам больше не нужна красная подсветка

Каждый, кто застал компьютерный бум нулевых, помнит символ прогресса в устройствах ввода — красный огонёк, бьющий из-под новой оптической мышки. Он пришёл на смену вечно забивающимся...

Обзор детектора FNIRSI WD-02: проводка и арматура не скроется

Ремонт в доме, в квартире или в гараже чаще всего подразумевает сверление или штробление стен и потолков, но как не попасть в проводку или арматуру? Конечно есть множество разнообразных приборов...

Обзор беговых смарт-часов Amazfit Active 3 Premium: теперь ты знаешь свой порог лактата

Решил заняться бегом, а выбор программ в фитнес-часах ограничен? На помощь пришли Amazfit с беговыми смарт-часами Active 3 Premium, в которых есть 10 видов беговых тренировок и оценка порога лактата.