3,583 papers
arXiv:2509.21910 80 26 сент. 2025 г. PRO

AutoSCORE: двухэтапное оценивание через извлечение компонентов по рубрике

КЛЮЧЕВАЯ СУТЬ
LLM ставят тот же балл что и эксперт, но приходят к нему другим путём — пропускают половину критериев рубрики или применяют неравномерно. Видишь оценку 7/10, но непонятно: модель проверила все пункты или просто угадала по общему впечатлению. Метод AutoSCORE даёт прозрачное оценивание — видно какие критерии учтены и почему поставлен конкретный балл. Разбивает процесс на два этапа: сначала извлеки компоненты по каждому критерию рубрики в JSON, потом оцени на основе этой структуры. Первый агент идёт по чеклисту («есть ли вывод?», «сколько аргументов?»), второй видит готовую карту фактов и применяет правила. Результат: каждый пункт рубрики явно проверен, процесс прослеживаем.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с