ChatGPT сдал экзамен в Токийский университет лучше людей

Компания LifePrompt Inc., специализирующаяся на системах искусственного интеллекта, проверила способность ChatGPT пройти тестовые испытания и поступить в Токийский университет. Алгоритм лучшим образом преодолел пороговые значения, установленные для людей.

Об этом оригинальном эксперименте написало японское издание JapanNews. Издание отмечает, что в ходе эксперимента, инициированного токийскими разработчиками, задействовали актуальную версию ChatGPT для решения заданий Единого теста поступления в вузы Японии (Common Test for University Admissions). ChatGPT также были предложены задания внутренних экзаменов университета по двум направлениям: точные и гуманитарные науки. Оценивание письменных ответов доверили преподавателям подготовительной школы «Кавайдзюку», известной высокими результатами своих слушателей. Шкала измерений охватывала диапазон от 0 до 550 баллов.

По словам издания, итоговые показатели распределились следующим образом: 503 балла за естественнонаучную часть, 452 — за гуманитарную. Данные величины превышают достижения реальных абитуриентов, прошедших отбор на программу Science III — подразделение с максимальным проходным баллом в Японии. Так, лучшие среди людей набрали 453 (естественные науки) и 434 (гуманитарные). В математике нейросеть продемонстрировала абсолютную точность — 120 из 120. Годом ранее фиксировался результат лишь 38 баллов.

«Стремительная эволюция алгоритмов вызывает удивление: два года назад ChatGPT не дотягивал до минимального порога, а сегодня превосходит лучших выпускников подготовительных школ», — прокомментировал представитель LifePrompt Inc.