Контент доступен только для PRO подписчиков
Чтобы получить доступ к полному содержанию этого исследования, оформите PRO подписку
TurnaboutLLM - Бенчмарк дедуктивного мышления из детективных игр
КЛЮЧЕВАЯ СУТЬ
Адаптировать под запрос
Для решения сложных логических задач с большим количеством фактов нужно отказаться от CHAIN-OF-THOUGHT промптинга и заставить модель проводить методичный исчерпывающий перебор всех возможных комбинаций. LLM работает не как гениальный детектив, а как УСЕРДНЫЙ АРХИВАРИУС, который должен систематически сопоставить каждое утверждение с каждым фактом.