Контент доступен только для PRO подписчиков
Чтобы получить доступ к полному содержанию этого исследования, оформите PRO подписку
Оценка ролевого взаимодействия для крупных языковых моделей
КЛЮЧЕВАЯ СУТЬ
Адаптировать под запрос
Вместо простого "Ты — Шерлок Холмс" создавай ДЕТАЛЬНЫЙ ПРОФИЛЬ с жесткими границами знаний. Главная проблема LLM — "утечка знаний" из общей базы данных в роль персонажа. Исследование показало, что даже GPT-4o легко ЛОМАЕТ РОЛЬ и отвечает как всезнающий ассистент, если вопрос выходит за рамки знаний персонажа. Герметичная роль — это роль с четкими ограничениями того, что персонаж НЕ знает.