3,583 papers
arXiv:2610.23060 85 16 окт. 2026 г. PRO

Retest-аудит и уточняющий вопрос: как не дать LLM-советнику менять рекомендацию из-за случайного ответа клиента

КЛЮЧЕВАЯ СУТЬ
Один и тот же клиент, те же факты. Меняешь в анкете один ответ на соседний — и LLM-советник сдвигает долю акций в среднем на 10–16 процентных пунктов (п.п.). Если ответ реально сменился, сдвиг доходит до 24–35 п.п. Метод позволяет проверить такого советника и вылечить его одним вопросом перед рекомендацией. Фишка: не предупреждай модель о шуме, а переспроси клиента. Сначала модель называет выбранный вариант риска и просит подтвердить. Для клиента, который поправил ответ, разброс упал с 33,5 до 1,9 п.п. При этом подтверждённое изменение по-прежнему двигает совет.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с