Вариации запросов в RAG: почему LLM нестабильны и как проверять consistency

Проблема: Одинаковый смысл вопроса, разные формулировки – LLM выдаёт разные ответы. "Как открыть вклад" vs "Как открыть вклады" — смысл тот же, модель видит разные токены и генерирует по-разному. Метод позволяет находить нестабильные места в промпте и убирать вариативность. Прогони запрос через 4 вариации: how to/do формулировки, единственное/множественное число, артикли, перефразировка. Где ответы расходятся — промпт нестабилен. Специализация побеждает универсальность: узкий чат "эксперт по вкладам" стабильнее широкого "консультант банка" — +47.5% согласованности ответов.