Контент доступен только для PRO подписчиков
Чтобы получить доступ к полному содержанию этого исследования, оформите PRO подписку
Оценка согласованности LLM: базовая линия пользователя против суррогатных метрик
КЛЮЧЕВАЯ СУТЬ
Адаптировать под запрос
Чем более открытым и неопределенным является промпт, тем сильнее будут различаться ответы модели при повторных генерациях, и это фундаментальное свойство LLM.