Гуманизация автоматизированной обратной связи по программированию: доводка генеративных моделей с помощью студенческих комментариев

Обнаружено: LLM, управляемые даже самыми сложными промптами, генерируют шаблонные «роботизированные» ответы — инструкции не могут передать тонкости человеческого стиля общения. Исследование показывает, что дообучение модели на 1900 примерах реальной студенческой обратной связи позволяет генерировать более точные и естественные ответы, чем любой детализированный промпт. Модель училась не на словах «будь дружелюбным», а на живых примерах дружелюбия — в результате fine-tuned Llama3 с базовым промптом превзошла ту же модель со сложнейшим «инженерным» промптом. Вывод: «показать» эффективнее, чем «рассказать».