Оценка больших языковых моделей в генерации кода: БЕСКОНЕЧНАЯ методология для определения индекса вывода.

LLM с помощью правильных промптов и уточнений способны генерировать код на уровне эксперта-человека, а более старая и общедоступная модель GPT-4o показала себя эффективнее более новых моделей, вероятно, из-за обучения на огромном массиве пользовательских исправлений.