Исследования14 августа 2026 г., 22:18 МСК🤖 Auto

LLM и люди: почему тайминг запроса меняет позицию модели

Исследование ICLR 2026 выявило парадокс: LLM и люди реагируют на позиционные смещения (primacy/recency) противоположным образом в зависимости от того, когда именно задан вопрос.

Баннер новости 5826

Парадокс позиционного смещения

Новое исследование, представленное на ICLR 2026 и отмеченное премией Entropic Award (Top 3 Paper), вскрывает фундаментальное различие в механизмах принятия решений у людей и больших языковых моделей. Авторы Jasin Cekinmez, Addison J. Wu и Thomas L. Griffiths доказали, что время запроса (query timing) — момент, когда модель получает инструкцию для оценки — критически влияет на появление эффектов первичности (primacy) и недавности (recency).

В то время как люди склонны обновлять убеждения в процессе получения информации, LLM часто делают это только в конце. Это приводит к тому, что новые модели демонстрируют более сильные позиционные искажения по сравнению со своими предшественниками, что ставит под вопрос надежность их работы в динамичных сценариях.

Ключевые метрики и сравнения

Исследование фокусируется на том, как изменение момента запроса меняет вес аргументов. Для наглядности различий между поведением человека и модели приведена сводная таблица:

Параметр Человеческое суждение LLM (Large Language Models)
Основной механизм Обновление убеждений в процессе (online) Оценка только в конце (offline)
Влияние тайминга Слабое или предсказуемое Критическое: меняет знак смещения
Тренд по поколениям Стабильный Усиление смещений в новых моделях
Результат ICLR 2026 Top 3 Paper (Entropic Award)

Почему это важно для индустрии

Результаты arXiv:2608.12387 имеют прямое отношение к безопасности и надежности AI. Если LLM реагируют на тайминг запроса противоположным образом, это создает уязвимость в системах, где контекст подается потоком (например, в чат-ботах или анализе документов в реальном времени). Разработчикам необходимо учитывать, что «свежесть» информации в промпте может неоправданно влиять на вывод модели, особенно в последних версиях архитектур.

Вывод

Исследование подтверждает: LLM не просто копируют человеческие когнитивные искажения, а развивают собственные, часто противоположные. Игнорирование фактора «когда задан вопрос» при тестировании и внедрении моделей может привести к систематическим ошибкам в критически важных задачах.

Источник: arXiv cs.CL ↗