3,583 papers
arXiv:2605.19196 74 18 мая 2026 г. PRO

REFLECT: пошаговая оценка по критериям vs "оцени целиком" — почему LLM как судья ненадёжен

КЛЮЧЕВАЯ СУТЬ
LLM как судья текста работает на уровне монетки: меньше 55% точности при оценке «в целом» — даже у топовых моделей. Метод REFLECT позволяет поднять точность на 14–34 пункта без смены модели и без дообучения. Фишка: вместо «оцени этот текст» — задай рубрику: оцени абзац 3 по критерию доказательности. Модель смотрит в одну точку, а не пытается охватить всё разом — конкретные ошибки становятся видимыми, а не размытыми по тексту.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с