3,583 papers
arXiv:2604.12491 73 14 апр. 2026 г. PRO

Multi-Format Agreement: проверка надёжности ответа LLM на таблицах через смену формата

КЛЮЧЕВАЯ СУТЬ
«Уверена на 99%» — права в 65–76% случаев. Разрыв в 30 пунктов, и так у всех пяти протестированных моделей без исключения. Просить модель оценить саму себя при работе с таблицами бесполезно: токен «99%» она генерирует по тем же шаблонам, что и любой другой ответ — никакого внутреннего «счётчика правильности» у неё нет. Метод MFA позволяет детектировать ненадёжный ответ по таблице — без знания правильного ответа и без самооценки модели. Один вопрос — три-четыре формата (Markdown, CSV, HTML, нумерованный список). Одни данные, разная упаковка. Все форматы совпали — точность выше 85%. Два и меньше — модель угадывала, точность падает ниже 40%.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с