3,583 papers
arXiv:2506.04118 65 1 июня 2025 г. PRO

Управляемая спекулятивная инференция для эффективного времени тестирования выравнивания LLM

КЛЮЧЕВАЯ СУТЬ
GSI использует КОМБИНАЦИЮ ТРЕХ РОЛЕЙ: быструю модель для генерации множества черновиков, модель-оценщика для их анализа и мощную модель для финального выбора. Качество через количество и отбор – вместо одного "достаточно хорошего" ответа система создает 10-20 вариантов и выбирает лучший. Это позволяет получить результат уровня БОЛЬШОЙ МОДЕЛИ при затратах МАЛЕНЬКОЙ МОДЕЛИ.
Адаптировать под запрос

Работа с исследованием

Адаптируйте исследование под ваши задачи или создайте готовый промпт на основе техник из исследования.

0 / 2000
~0.5-2 N-токенов ~10-30с
~0.3-1 N-токенов ~5-15с