3,583 papers
arXiv:2509.13332 86 9 сент. 2025 г. PRO

Thinking Mode в LLM-судьях: явное рассуждение перед вердиктом

КЛЮЧЕВАЯ СУТЬ
Обнаружено: LLM-судьи оценивают импульсивно — выбирают по длине текста, позиции в списке, формальным признакам. На сложных задачах это проваливается: 56% точности вместо нужных 78%. Метод Thinking Mode позволяет получать взвешенные обоснованные оценки вместо импульсивных вердиктов. Добавь в промпт "Сначала объясни рассуждения, потом вердикт". Модель проговаривает критерии → разбирает каждый вариант → видит компромиссы. Точность подскакивает с 56% до 78%, а затраты растут всего в 1.5-2 раза.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с