OpenGCUA: агент пишет короткую программу вместо списка кликов и сам решает, когда смотреть на экран

Пачка из десяти кликов — это программа без управления ходом. Агент заранее решает всё, не видя результата первого шага. Диалог выскочил, а клики идут вслепую. Метод OpenGCUA позволяет агенту выполнять рутину на компьютере за малое число вызовов модели и не ломаться от случайных окон. Фишка: на каждом шаге модель выдаёт не список действий, а короткую программу на Python. В ней клики, команды терминала и расчёты стоят рядом. Рядом с ними условия, циклы и проверки результата. Программа сама реагирует на промежуточные итоги, без нового вызова модели. А скриншот модель просит только тогда, когда он ей нужен.