Closed-Loop Planning: итеративное планирование с обратной связью на уровне эксперта

Исследователи Johns Hopkins посадили LLM и PhD-химиков за одну задачу: спланировать реальный химический синтез. Счёт по известным задачам — 75% у модели против 83% у эксперта. По новым задачам без готового ответа — 22% у модели против 17% у эксперта. Это не поражение, это ничья. Метод замкнутого цикла (closed-loop planning) позволяет использовать LLM как живого советника для любых итеративных задач — не разовый ответ, а пересмотр плана на основе реальных результатов. Модель получает описание того, что сработало и что провалилось, и переписывает план с учётом реальных данных — не начинает с нуля, а строит следующий шаг на предыдущем опыте. Каждая итерация умнее предыдущей.