3,583 papers
arXiv:2607.02235 74 2 июля 2026 г. PRO

LLM-судья: почему нельзя доверять одной модели оценку текста — и как это исправить

КЛЮЧЕВАЯ СУТЬ
Написал текст в ChatGPT — попросил ChatGPT его оценить? Поздравляю, результат предсказан заранее. Модель завышает оценку собственным текстам систематически — это не баг, это паттерн. Multi-judge протокол позволяет получить честную оценку вариантов текста: несколько разных моделей, конкретная рубрика, смена порядка. Три сдвига ломают любую одиночную оценку: длинный текст кажется лучше (verbosity bias), первый в списке выигрывает (position bias), своё ценится выше чужого (self-enhancement bias). Знаешь об этом — можешь нейтрализовать.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с