AiKraft
Исследования24 октября 2026 г., 03:18 МСК🤖 Auto

Иллюзия прогресса: LLM не спасли языки Африки и Азии

Исследование 1158 статей за 2020–2025 гг. показывает, что рост публикаций по NLP для малообеспеченных языков (LRL) не привел к их реальной инклюзии. В то время как азиатские языки составляют 64% носителей, они получают лишь 46.7% внимания исследовате

Баннер новости 10413

Рост есть, но он неравномерный

Авторы работы, опубликованной в arXiv (21 октября 2026 года), проанализировали 1158 рецензируемых статей из ACL Anthology. За пять лет объем исследований вырос в 5.4 раза: с 52 публикаций в год до 415. Однако этот рост сконцентрировался на уже представленных языках, а не на охвате ранее игнорируемых лингвистических групп.

Новая метрика: Linguistic Inclusion Framework (LIF)

Для оценки реального прогресса команда разработала LIF — многомерный фреймворк, измеряющий инклюзию по четырем параметрам: рост исследований, расширение репрезентации, непрерывность репрезентации и распределительная справедливость. Анализ показал, что ни один континент не демонстрирует высокие результаты по всем четырем шкалам одновременно.

Географический дисбаланс

Самый яркий контраст наблюдается между Азией и Европой. Азиатские языки, на которых говорят 64.1% носителей малообеспеченных языков (LRL), получают лишь 46.7% исследовательского внимания (0.7x от пропорциональной доли). Напротив, европейские языки получают 5.3x больше внимания, чем это оправдано демографией.

Регион Доля носителей LRL Доля исследовательского внимания Коэффициент справедливости
Азия 64.1% 46.7% 0.7x (недофинансирование)
Европа — — 5.3x (перефинансирование)
Субсахарская Африка Высокая Низкая Минимальный охват
Юго-Восточная Азия Высокая Низкая Минимальный охват

Вывод для индустрии

Рост числа публикаций сам по себе не является надежным индикатором прогресса в создании равноправных языковых технологий. Регионы с высокой лингвистической диверсификацией, такие как субсахарская Африка и Юго-Восточная Азия, остаются наиболее уязвимыми. Исследователи обещают опубликовать собранные данные для дальнейшего анализа.

Источник: arXiv cs.CL ↗