OpenAI Agents API: Computer Use

Computer Use — инструмент Agents API, который позволяет агенту взаимодействовать с браузером через графический интерфейс. Приложение создаёт браузерную сессию, передаёт задачу, получает события выполнения и обрабатывает запросы на доступ. В DevDay OpenAI расширила Agents API управляемой средой на базе Codex и добавила управление компьютером к набору возможностей для разработчиков.

Что делает браузерный инструмент

Работа с интерфейсом сайта

Агент может переходить по страницам, исследовать сайты, взаимодействовать с приложениями и выполнять задачи через их пользовательский интерфейс. Разработчик включает `computer_use` в инструменты агента и настраивает размещённое OpenAI окружение с графическим рабочим столом. Это полезно для задач, где нет подходящего API, но требует явных правил доступа и проверки результата.

Сессия управляется приложением

События, продолжение и проверка

Приложение создаёт браузерную сессию, отправляет агенту задачу, обрабатывает события, ждёт завершения и проверяет результат. Если внешний сайт требует входа, пользователь должен пройти аутентификацию. Документация OpenAI отдельно описывает сохранение активности браузера и удаление завершённой сессии. Управление сессией и хранение данных остаются частью ответственности интегратора.

Подтверждение доступа к сайтам

Каждый новый источник требует решения

Компьютерный браузер запрашивает подтверждение перед доступом к новому origin, даже если сайт публичный. Приложение должно показать адрес и причину запроса и передать решение пользователя. Разрешение на origin не заменяет подтверждения критических действий внутри сайта: покупок, удаления данных или отправки сообщений. Для чувствительных процессов нужны отдельные ограничения среды и явный контроль.

Доступность и связанная инфраструктура

API, облачная среда и правила безопасности

DevDay-анонс описывает доступ через API, а также в Codex и ChatGPT Work для подходящих планов. Точный доступ зависит от рабочей области и текущих условий OpenAI. Computer Use следует рассматривать как один инструмент в агентном цикле, а не как автономную систему с универсальными правами. См. также Decisions API и Codex.

Связанные страницы

Материалы Futuretools

Computer-Use Preview · Decisions API · Codex · OpenAI в Вики Futuretools

Официальные источники

Материалы OpenAI и документация

Источник 1 · Источник 2 · Источник 3