Microsoft представляет «Использование компьютера», новую функцию AI для Copilot Studio

В этот вторник компания Microsoft представила новую функцию для Copilot Studio под названием «использование компьютера», которая позволяет AI-агентам самостоятельно взаимодействовать с веб-сайтами и настольными приложениями. Новое обновление доступно в раннем доступе для исследовательского предпросмотра для избранных пользователей.

Согласно анонсу Microsoft, использование компьютера позволяет агентам искусственного интеллекта распознавать множество элементов на платформах, навигировать, кликать и взаимодействовать с многими веб-сайтами без необходимости использования API.

«Благодаря использованию компьютеров, агенты теперь могут взаимодействовать с любой системой, имеющей графический пользовательский интерфейс», — написал Чарльз Ламанна, корпоративный вице-президент по деловым и промышленным вопросам в Copilot от Microsoft. «Если человек может использовать приложение, то агент тоже может».

Технологический гигант выделил несколько примеров использования, включая автоматический ввод данных для обработки больших объемов информации, проведение рыночных исследований с помощью AI-агентов, которые собирают данные с нескольких веб-сайтов и генерируют анализ, основанный на проницательности, а также обработку счетов-фактур с помощью AI-агентов в Copilot Studio для извлечения и переноса данных счетов-фактур непосредственно в бухгалтерские системы компании, что исключает необходимость в ручном вводе.

Microsoft объявила, что новые возможности являются как интуитивно понятными, так и интеллектуальными, они разработаны для преодоления таких проблем, как навигация по сложным интерфейсам. С использованием компьютера, агенты ИИ могут выполнять задачи в реальном времени, позволяя пользователям контролировать свои действия и отслеживать производительность через журнал истории, который включает шаги рассуждения и скриншоты соответствующей задачи.

Те, кто заинтересован в тестировании новой функции ИИ, могут заполнить форму и запросить участие в периоде раннего доступа. Компания также обещала предоставить больше подробностей на мероприятии Microsoft Build в мае.

Всего несколько недель назад, Microsoft объявила о наборе агентов безопасности, работающих на базе ИИ, и теперь компьютерное пользование. Новая функция ИИ в Copilot Studio может быть сравнена с программой Operator от OpenAI. Этот стартап в области ИИ представил Operator в январе в качестве агента ИИ, который может управлять компьютерами и выполнять задачи автономно.