Computer Use (управление компьютером)

Computer use — способность агента управлять компьютером как человек: модель получает скриншоты экрана, осмысляет увиденное и выдаёт движения мыши, клики и нажатия клавиш, чтобы выполнить задачу. Первую фронтирную версию выпустила Anthropic в конце 2024 года, следом появился Operator от OpenAI. Паттерн важен, потому что работает с любым софтом с графическим интерфейсом — устаревшие ERP, админ-панели, сайты без API — там, где классическая интеграция невозможна. Каждый шаг — цикл: снять экран, выбрать действие, выполнить, посмотреть результат. Этот цикл медленнее и дороже вызова API, а ошибочные клики накапливаются, поэтому в продакшене среду изолируют в песочнице, ограничивают учётные данные и оставляют человеку подтверждение необратимых шагов вроде платежей и удалений. Для SaaS-команд computer use открывает автоматизацию длинного хвоста инструментов, у которых никогда не будет эндпоинта.