Тестирование политической позиции LLM: как модели меняют своё мнение в зависимости от промпта

Спросил GPT-4o-mini на греческом о споре за Эгейские острова — поддерживает Грецию. На турецком — Турцию. Та же модель, тот же вопрос. Исследование на 9 моделях и 24 спорных темах показало: в 45% случаев модели меняют позицию под влиянием промптинга. Фишка: смена языка промпта — самый мощный рычаг (работает в 36.7% случаев). Модель черпает из той части датасета, которая написана на языке промпта. Турецкие тексты чаще содержат аргументы Турции, греческие — Греции. Результат: одна и та же модель даёт противоположные выводы.