Контент доступен только для PRO подписчиков
Чтобы получить доступ к полному содержанию этого исследования, оформите PRO подписку
Язык инструкций меняет всё: как выбор языка в промпте меняет качество оценки вдвое
КЛЮЧЕВАЯ СУТЬ
Адаптировать под запрос
Шесть разных моделей оценивают один текст — и почти не совпадают. Согласие едва выше случайного (κ < 0.25). Один из главных виновников — языковой разнобой внутри промпта. Принцип языковой согласованности позволяет убрать этот источник шума: писать задачу, критерии и инструкции на одном языке. Мешаешь языки — модель переключается между разными паттернами внутри одного рассуждения. Нестабильность растёт. На некоторых языках частичная локализация роняет качество оценки вдвое.
Дайджест исследования
Контент доступен только для PRO подписчиков
Чтобы получить доступ к дайджесту этого исследования, оформите PRO подписку
Контент доступен только для PRO подписчиков
Чтобы получить доступ к концептам этого исследования, оформите PRO подписку
Простыми словами
Контент доступен только для PRO подписчиков
Чтобы получить доступ к упрощённому объяснению этого исследования, оформите PRO подписку