Три дефекта кодового промпта: недоспецификация убивает качество сильнее опечаток

Исследование 10 моделей показало неожиданный факт: опечатки в промпте почти не влияют на код, зато пропущенное ограничение роняет правильность до 15%. Таксономия трёх дефектов позволяет сразу видеть что в кодовом промпте критично, а что можно игнорировать — и не тратить силы не на то. LLM не выдаёт ошибку на плохом промпте — она пишет синтаксически верный, семантически сломанный код. Модель додумывает пропущенные требования по умолчанию из обучающих данных. И GPT-4 класса, и маленькие open-source модели деградируют одинаково — выбор мощной модели не спасает от плохой спецификации.