3,583 papers
arXiv:2610.12289 88 8 окт. 2026 г. PRO

TestHelix: проверка тестов, написанных агентом, на чужих реализациях, а не на одном эталоне

КЛЮЧЕВАЯ СУТЬ
Зелёный тест от агента почти ничего не гарантирует. У лучшего агента 59,67% задач проходят проверку «упал на старом коде, прошёл на эталоне». Но если прогнать эти тесты на 4 других верных и 5 неверных решениях, полностью надёжны только 28%. Метод TestHelix позволяет получить от кодинг-агента тесты, которые не душат верные решения и ловят настоящие баги. Несколько изолированных агентов пишут пары «тест + своя реализация», а потом каждый тест гоняют на чужом коде. Это перекрёстный запуск: тест, подогнанный под одно решение, сразу вылезает наружу.
Адаптировать под запрос
📋 Дайджест исследования

Контент доступен только для PRO подписчиков

Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Контент доступен только для PRO подписчиков

Чтобы получить доступ к концептам этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO
📖 Простыми словами

Контент доступен только для PRO подписчиков

Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку

💳 Оплатить через Геткурс
YandexPay • SberPay • СБП • Карты РФ
⚡ Оплатить через Tribute
Telegram Stars • Моментальный доступ
Узнать о PRO

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с