OpenAI анонсировала масштабное обновление Codex — инструмента, которым еженедельно пользуются около 3 миллионов человек. Главное новшество — возможность фонового управления компьютером: агент теперь видит экран, кликает курсором и вводит текст в любых приложениях, включая те, у которых отсутствует API. Пока функция доступна только на macOS, пользователи из ЕС и Великобритании получат её позже. Это облегчает тестирование, работу с GUI и позволяет автоматизировать рутинные задачи, пока пользователь занят другим.
В приложении появился встроенный браузер с возможностью комментирования элементов и задания точных инструкций агенту. Codex также интегрировали с gpt-image-1.5, что позволяет создавать макеты и изображения прямо в рамках задач. В каталоге расширений добавлено более 90 новых плагинов, включая Atlassian Rovo, CircleCI, GitLab Issues, Microsoft Suite и другие.
Дополнительно в десктопной версии появились функции для анализа GitHub-ревью, многовкладочные терминалы, SSH-доступ к удалённым devbox’ам (в alpha) и панель предпросмотра документов. Автоматизации научились продолжать долгосрочные задачи, назначать напоминания и возвращаться к ним через дни и недели.
Codex теперь запоминает пользовательские предпочтения, исправления и контекст, что упрощает работу и повышает персонализацию. Также появились проактивные подсказки: агент формирует приоритетные списки задач, основываясь на комментариях в Google Docs, данных из Slack, Notion и кодовой базы.
Некоторые функции персонализации и памяти будут доступны позднее для Enterprise, Edu и европейских пользователей, а остальные нововведения уже доступны в последней версии десктопного приложения с ChatGPT-подключением.