3,583 papers
arXiv:2509.18420 74 22 сент. 2025 г. PRO

Проверяемые форматные инструкции: 19 типов требований для точного формата

КЛЮЧЕВАЯ СУТЬ
GPT-5 идеально понимает задачу, но проваливает требование 'текст строчными буквами' или 'ровно 3 запятые'. Для человека тривиально, для LLM — открытая проблема: даже топовые модели игнорируют 20-30% форматных требований, старые — до 80%. Исследование IFEval-FC позволяет генерировать тексты с точным форматом через 19 типов проверяемых инструкций. Вместо расплывчатого 'кратко' — конкретное 'ровно 50 слов'. Вместо 'без лишнего' — 'без знаков препинания'. Результат: модель понимает что критично (не 'желательно'), самопроверяет выполнение, корректирует если нужно — точность с 40% до 98% на reasoning-моделях.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с