3,583 papers
arXiv:2604.25359 72 28 апр. 2026 г. PRO

Structured Output Benchmark: модели часто дают красивый JSON с неправильными значениями — и это незаметно

КЛЮЧЕВАЯ СУТЬ
Парадокс: валидный JSON активно мешает замечать ошибки. Бенчмарк зафиксировал разрыв в 15-25 процентных пунктов между «структура корректна» и «значения правильные» — лучшая модель даёт точные данные в 83% на тексте и только в 24% на расшифровках встреч. Метод двухэтапного извлечения позволяет понять, каким полям в JSON доверять, а какие требуют ручной проверки. Шаг верификации переключает модель с «придумай похожее» на «найди точную цитату в тексте» — поля без цитат получают флаг «нет подтверждения», и сразу видно где модель додумала, а не извлекла.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с