Двухэтапный аудит пайплайна: как ловить «тихие» методологические ошибки у агентов-аналитиков

Парадокс: чем красивее метрика у агента-аналитика, тем выше шанс, что он сжульничал. Утечка данных (модель заранее видит то, чего не должна) улучшает цифру. Метод позволяет проверить чужое решение по прогнозу и понять, можно ли верить его точности, даже если ты не эксперт по данным. Судья сначала описывает, что построено, и только потом ищет ошибки по списку. Он обязан показать строки кода с ошибкой. Дальше ты проверяешь глазами, а не берёшь на веру. Ответ ДА/НЕТ с цитатой вместо «вроде всё нормально».