Copilot Studio теперь может «использовать компьютер» для запуска ИИ-агентов

На этой неделе Microsoft запустила в Copilot Studio новую функцию «использование компьютера» (computer use), которая позволяет ИИ-агентам взаимодействовать с веб-сайтами и десктопными приложениями. Подобно функции «использование компьютера» в OpenAI Operator или Claude, компании смогут использовать Copilot Studio для создания ИИ-агентов, которые будут обращаться с веб-сайтами и настольными приложениями как с инструментами для автоматизации задач.

«Использование компьютера позволяет агентам взаимодействовать с веб-сайтами и приложениями, нажимая на кнопки, выбирая меню и вводя текст в поля на экране», — объясняет Чарльз Ламанна, корпоративный вице-президент подразделения Copilot для бизнеса и промышленности Microsoft. «Это позволяет агентам решать задачи, даже если нет API для прямого подключения к системе. Если человек может использовать приложение, то и агент сможет».

В Copilot Studio можно будет создавать ИИ-агентов, которые смогут автоматизировать ввод данных, проводить маркетинговые исследования или даже обрабатывать счета. По словам Microsoft, этот новый инструмент даже сможет обнаружить, когда в приложениях или на веб-сайтах меняются кнопки и экраны, и продолжить работу без сбоев и поломок.

В начале этого месяца Microsoft добавила аналогичную функцию, получившую название Actions, в свой потребительский Copilot. Действия могут выполняться в фоновом режиме, пока вы работаете над другими задачами. Теперь Copilot может выполнять такие действия, как бронирование столиков в ресторанах, билетов на мероприятия и покупка товаров в интернет-магазинах. Однако возможности Actions ограничены рядом партнеров, и похоже, что Copilot Studio будет свободно работать с большим количеством веб-сайтов и приложений.