7 760 статей
arXiv:2611.06483 74 4 нояб. 2026 г. PRO

Ловушка бюджета ходов в RL-агентах: почему дообученные агенты хуже думают на первом шаге, но лучше выкручиваются из ошибок

КЛЮЧЕВАЯ СУТЬ
Обнаружено: ИИ-агенты после многошагового обучения с подкреплением (RL) хуже думают на первом шаге, чем базовые модели, а при жёстком лимите ходов их преимущество вообще уходит в минус. Настройка бюджета шагов (Budget-Aware Prompting) позволяет защитить рабочие базы и код от слепых поломок на старте и включить сильный режим самоисправления агента. Фишка в том, что RL-агенты выигрывают за счёт выкручивания из ошибок, а не за счёт идеального первого хода. Передавай в промпт остаток бюджета шагов и требуй холостую проверку перед изменениями — после сбоя такой агент восстанавливается в 66–67% случаев и вдвое обходит базовую модель.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с