KAIST и Microsoft Research Asia разработали метод нейронного выравнивания ИИ

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

Исследователи из KAIST совместно с Microsoft Research Asia предложили метод Neural Value Alignment, или NVA, для настройки поведения ИИ по электроэнцефалограмме человека. Система должна замечать момент, когда наблюдаемое действие не совпало с ожиданием пользователя, и использовать этот сигнал как дополнительную обратную связь.

Подход не декодирует мысли, фразы, изображения или подробные намерения человека. Вместо этого он анализирует два типа сигналов, возникающих при ошибке предсказания. Они появляются, когда результат действия оказывается не таким, каким его ожидал наблюдатель, либо когда к нужному результату приходят неожиданным способом.

Первый сигнал авторы называют ошибкой предсказания вознаграждения, Reward Prediction Error. Он указывает, что ИИ, вероятно, неверно понял конечную цель. Например, человек просит принести напиток, а система выбирает кофе, хотя пользователь рассчитывал на воду. Второй тип — ошибка предсказания состояния, State Prediction Error. В этом случае цель может быть достигнута верно, но выбранная последовательность действий расходится с ожиданием человека.

Автор: DC Studio Источник: www.magnific.com

В ходе экспериментов участники наблюдали за действиями ИИ, а исследователи регистрировали их EEG. Алгоритмы глубокого обучения смогли различать сигналы, связанные с ошибкой цели, ошибкой способа действия и сочетанием двух типов расхождений. Затем эти данные использовались в алгоритме принятия решений, чтобы изменить дальнейшее поведение ИИ.

Авторы проверяли систему в симуляциях, а не на домашнем роботе, который самостоятельно действует в обычной квартире. Практическое применение потребует устойчивого считывания EEG при движении человека, в шумной среде и при более сложных сценариях взаимодействия. Электроэнцефалография также требует контакта датчиков с головой, что пока ограничивает удобство повседневного использования.

В перспективе NVA может найти применение в ассистивной робототехнике, системах реабилитации, образовательных программах и других сценариях, где важно быстро уточнять намерение пользователя. Научная статья опубликована в IEEE Transactions on Cybernetics; она вышла онлайн 24 августа 2026 года.

Источник: New Atlas

нет
Автор не входит в состав редакции iXBT.com (подробнее »)

0 комментариев

Добавить комментарий

Сейчас на главной

Новости

Публикации

Вселенная гораздо старше, а темной материи и энергии не существует: новая теория выдержала проверку рождением первых элементов

Любая космологическая теория, которая претендует на описание устройства Вселенной, обязана пройти проверку первичным нуклеосинтезом. Так в астрофизике называют процесс образования первых атомных...

Денежная шахта: почему более двухсот лет не удаётся достать спрятанный клад на острове Оук

Небольшой остров Оук расположен в заливе Махон у побережья Новой Шотландии в Канаде. С конца XVIII века он стал местом одной из самых продолжительных и затратных попыток найти спрятанный клад....

Почему Крымскую АЭС забросили, хотя она была готова почти на 90%

В декабре 1982 года строители Крымской АЭС торжественно залили первые кубометры бетона в основание реакторного отделения. На бетоновозе закрепили плакат с обещанием построить первый энергоблок в...

Страна Пунт: египтяне плавали туда за редкостями, а мы спорим, где она находилась

Мы знаем, что египтяне привозили из Пунта. Знаем имя одного из его правителей и даже можем посмотреть, как художники изобразили его жену. Сохранились изображения кораблей, грузов и домов на опорах....

Как песчаный остров Сейбл погубил сотни кораблей

У Сейбла судно могло сесть на мель ещё до того, как команда замечала берег. Подводные песчаные косы уходят далеко за оконечности острова, а низкую сушу часто скрывает туман. За несколько столетий...

Зачем на домашнем телефоне была кнопка R или Flash и почему ею пользовались не все

На кнопочном домашнем телефоне рядом с цифрами встречалась клавиша R, Recall или Flash. С повторным набором всё было понятно: нажал — аппарат снова звонит по последнему номеру. А...