Контент доступен только для PRO подписчиков
Чтобы получить доступ к полному содержанию этого исследования, оформите PRO подписку
IdentifyMe - сложный бенчмарк для разрешения упоминаний с длинным контекстом для больших языковых моделей (LLMs).
КЛЮЧЕВАЯ СУТЬ
Адаптировать под запрос
Простая инструкция "сначала объясни свое рассуждение, а потом дай ответ" (техника Chain-of-Thought) значительно повышает точность моделей при решении этой сложной задачи.