Искусственный интеллект может переводить 200 языков в режиме реального времени

Новая модель превзошла существующие эталоны на целых 70 процентов.

В настоящее время на планете Земля говорят более чем на 7000 языков и Meta**, похоже, хочет понять их все. Шесть месяцев назад компания запустила свой амбициозный проект No Language Left Behind (NLLB), обучая ИИ (искусственный интеллект) беспрепятственному переводу между многочисленными языками без необходимости сначала изучать английский язык. В среду компания объявила о своем первом большом успехе, получившем название NLLB-200. Это модель ИИ, которая может говорить на 200 языках, включая ряд менее распространенных языков из Азии и Африки, таких как лаосский и камба.

Согласно сообщению в блоге компании, опубликованному в среду, NLLB-200 может переводить 55 африканских языков с «высококачественными результатами». Meta** может похвастаться тем, что производительность модели в тесте FLORES-101 превзошла существующие современные модели в среднем на 44 процента, а для некоторых африканских и индийских диалектов — на целых 70 процентов.

Перевод между любыми двумя заданными языками — особенно если ни один из них не является английским — оказался серьезной проблемой для языковых моделей ИИ, потому что отчасти многие из этих систем перевода полагаются на письменные данные, извлеченные из интернета для обучения. Это очень легко сделать, если вы говорите на том языке, на котором написано это предложение, и гораздо сложнее, если вы ищете качественный контент на фанском или кикуйю.

Как и большинство других публично продвигаемых программ искусственного интеллекта, Meta** решила открыть исходный код NLLB-200, а также предоставить гранты в размере 200 000 долларов некоммерческим организациям для разработки реальных приложений для этой технологии. Например, такие приложения, как Facebook* News Feed или Instagram*. «Представьте, что вы посещаете любимую группу в Facebook*, натыкаетесь на пост на игбо или луганде и можете понять его на своем родном языке одним нажатием кнопки», — сообщили в Meta**. Вы можете ознакомиться о том, как работает новая модель, на демонстрационном сайте Meta**.

* Meta* — запрещённая на территории РФ экстремистская организация

* — Компания Meta (социальные сети Instagram и Facebook) — признана экстремистской организацией на территории Российской Федерации

Источник: pcmag