Ни для кого не секрет, что компания OpenAI в последнее время сталкивается с серьёзной конкуренцией со стороны Anthropic, которая сделала акцент на сервисах для программирования и начала даже доминировать в этом направлении. Чтобы исправить положение, OpenAI вчера, 16 апреля, выпустила крупный апдейт для инструмента Codex, существенно расширив возможности утилиты. Например, теперь система может работать в фоновом режиме, используя все приложения на компьютере пользователя для выполнения поставленной задачи. Со стороны это выглядит так, как будто пользователь всё делает сам.
Инструмент на базе искусственного интеллекта может «видеть» то, что происходит на экране компьютера, кликать виртуальным курсором по нужным кнопкам, иконкам и меню, вводить текстовые команды и многое другое. Более того, запускать можно не одного ИИ-агента, а сразу нескольких.
«Несколько агентов могут работать на вашем Mac параллельно, не мешая вашей работе в других приложениях. Для разработчиков это крайне полезно в процессе внесения изменений в интерфейс софта, тестировании приложений и в процессе выполнения иных типов задач», — объяснили представители OpenAI в блоге.
Кроме того, OpenAI встроила браузер в ИИ-инструмент Codex — теперь пользователь может просмотреть страницу, а затем оставить искусственному интеллекту комментарии-инструкции, следуя которым, система будет вносить изменения. В компании считают, что это крайне полезная фича для фронтэнд-разработки и разработки игр, плюс со временем представители американского гиганта планируют расширить возможности этой функции, чтобы Codex мог полностью управлять браузером не только в веб-приложениях на локальном компьютере пользователя.
Также Codex теперь может использовать генеративную модель gpt-image-1.5 для генерации и интерактивной обработки изображений. Это позволяет достаточно быстро создавать визуальные концепции конечного продукта, дизайн интерфейса, макеты и даже игры в рамках единого рабочего процесса. И так как всё вышеперечисленное явно нацелено в том числе на корпоративный сектор, OpenAI выпустила свыше 90 дополнительных плагинов для интеграции с популярными приложениями и MCP-серверами.
Правда, стоит отметить, что все вышеперечисленные нововведения пока что доступны исключительно на операционной системе macOS — в официальном пресс-релизе информация о планах по реализации тех же инноваций на других ОС отсутствует.
