Prompt Perturbation & Fraction Facilitation: как мелкие изменения промпта дают разные результаты

Замена «оцени» на «поставь оценку» в промпте меняет корреляцию с экспертными оценками с 0.176 до 0.279 на одной задаче. Это не баг — статистическая природа LLM. Метод позволяет находить лучшие формулировки для конкретной модели и точнее ранжировать объекты через усреднение разных промптов. Три техники работают вместе: (1) тестируй 3-5 вариаций промпта — найдёшь лучшую формулировку, (2) усредняй оценки от разных формулировок — снизишь шум, (3) разреши дробные ответы (2.7★, 3.2★) — модель покажет внутреннюю уверенность вместо грубого округления. Разброс оценок вырастает с 2-3 значений до 14-18 — больше градаций = точнее сортировка.