Прогрессивные ограничения в системном промпте: больше правил ≠ лучше результат

Парадокс: добавил три примера в промпт для GPT-4 — результат стал хуже, чем совсем без них. Не разово, а как закономерность — подтверждённая на пяти уровнях жёсткости системного промпта в задачах генерации кода. Исследование даёт возможность перестать добавлять правила 'на всякий случай' и найти оптимальную дозу ограничений под свою задачу. Фишка: примеры не учат сильную модель — они её запирают. Модель следует паттерну примера вместо оптимального решения. Убери примеры из промпта для Claude или GPT-4 на знакомой задаче — результат скорее всего вырастет.