MathGPT установил рекорд, побив ChatGPT и модели ИИ от Microsoft

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

Компания Mathpresso объявила о том, что ее крупная языковая модель под названием MathGPT установила новый мировой рекорд в области математики, обойдя модели OpenAI и Microsoft. Компания является разработчиком самой обширной в Азии обучающей платформы на основе искусственного интеллекта.

Источник: technologyforlearners.com

Как сообщается, MathGPT заняла первое место в тестах, оценивающих математические способности, таких как MATH (12,5 тыс. сложных математических задач) и GSM8K (8,5 тыс. задач по математике для начальной школы), побив модель ToRA 13B от Microsoft, которой принадлежал предыдущий рекорд.

В бенчмарке MATH MathGPT превзошел производительность GPT-4 от OpenAI. Совместная разработка Qanda и Upstage начала создавать MathGPT в рамках стратегического партнерства с KT в ноябре 2023 года. Qanda предоставила Upstage данные об обучении, такие как уровень обучения, контекст и взаимодействие, накопленные в результате ежедневного поиска 10 млн задач.

В сентябре 2023 года Mathpresso также получила от KT инвестиции в размере $8 млн на развитие LLM. Upstage обучила его на собственном специализированном решении для предотвращения галлюцинаций и доработала языковую модель на основе естественного языка, чтобы обеспечить логические выводы.

ChatGPT обучается на основе обширных текстовых данных, а не на основе данных, специфичных для конкретной области, таких как знания экспертов. Следовательно, в нем проявляется феномен галлюцинации, когда нейронная сеть генерирует ответы, которые могут убедительно передавать неверную информацию. Это создает серьезную проблему. Особенно в образовательных контекстах, где распространение точной и достоверной информации имеет первостепенное значение. Примечательно, что ChatGPT продемонстрировал низкую точность, особенно в математических областях.

В заявлении Qanda говорится, что они продолжат улучшать точность и производительность MathGPT, и в конечном итоге объединят его со своим обучающим интерфейсом для реализации AI Tutor, помощника в виде ИИ-репетитора.

Qanda поддерживается такими крупными организациями, как Google, TikTok и Softbank Ventures Asia. Приложение распознает текст и математические уравнения с фотографий. Ежедневно в Qanda загружается около 10 млн фотографий по всему миру.

Источник: Mt

6 комментариев

Добавить комментарий

s
Перевод новости от нейронки? Где пруфы? Если погуглить эту модель там один скам и реклама приложений скорее всего на основе ворованых моделей chatgpt.
d
Плохо гуглишь.
1
Подскажите, пожалуйста, а по каким ключевым словам правильно гуглить в данной ситуации? Я решил попробовать, где этот бенчмарк MATH расположен и кто там на каких местах. Погуглил по словам «benchmark MATH problem solving». Пришёл на страницу https://paperswithcode.com/sota/math-word-problem-solving-on-math
Но там на первом месте… GPT-4-code model (CSV, w/ code, SC, k=16).
Что я делаю не так?
d
Все не так. У Qanda есть свой Github.
Допустим, вас же не смутило, что это уже давно не первое место https://github.com/iiis-ai/cumulative-reasoning, если вы с этим ознакамливались вообще.
K
Я как раз попался на этот скам. Потратил 1200 руб и получил нейронку, которая не может даже простейший интеграл найти с помощью интегрирования по частям…
a
Молоток обогнал микроскоп в удобстве забивания гвоздей

Добавить комментарий

Сейчас на главной

Новости

Публикации

Почему Sony поглотила Aiwa: что произошло с японской компанией, чьи музыкальные центры покупали по всему миру

В 1990-е музыкальные центры Aiwa можно было встретить практически в любом магазине электроники. Две кассетные деки, CD-проигрыватель, крупные колонки и множество режимов звучания. По оснащению...

По льду Байкала проложили десятки километров рельсов. Почему вагоны по ним тянули лошади?

Станция Байкал, зима 1904 года. У берега на рельсах стоит вагон, к которому припрягли четырёх лошадей. Путь перед ним уходит прямо на замёрзшее озеро. Первому вагону предстоит добраться до Танхоя...

В Британии из-за опавших листьев меняют расписание поездов

Осенью британский машинист может начать тормозить перед станцией раньше обычного. Впереди та же платформа, под колёсами те же стальные рельсы, а деревья рядом с путём успели сбросить...

Единственный двухкассетный и портативный: почему плеер Sony WM-W800 не стал массовым

Эпоха звука на кассетах прошла, но ностальгические воспоминания и искреннее удивление инженерным решениями до сих пор не проходят. Есть кассетники, которые кажутся настолько странными, что при...

Магнитная головка: почему маленькая деталь советского магнитофона была «золотой жилой»

Советский катушечный магнитофон стал для миллионов людей настоящим символом эпохи. Но мало кто знает, что судьба этих аппаратов во многом зависела от одной небольшой, но чрезвычайно важной детали....

Сова слышит полёвку под снегом. Зачем она зависает над сугробом перед броском?

Бородатая неясыть скользит над снегом, поворачивает голову вниз и на миг остаётся почти на месте. Затем вытягивает лапы и уходит в снег. Сверху поверхность выглядит ровной, а добыча движется в...