Дом
Агенты искусственного интеллекта получают новую способность ориентироваться в веб -сайтах и приложениях с последним навыком Copilot Studio

Представьте себе ИИ-агента, способного не только искать информацию в интернете, но и взаимодействовать с веб-сайтами, выполняя задачи самостоятельно. Это видение лежит в основе последней инновации Microsoft.
В среду Microsoft представила новую интерактивную функцию для своей платформы Copilot Studio, которая позволяет пользователям создавать собственных ИИ-агентов. Эта функция, названная «использование компьютера», позволяет любому созданному вами агенту перемещаться по настольным приложениям или веб-сайтам и выполнять задачи так же, как это сделал бы человек.
Эта функция внедряется через предварительный доступ для исследований. С её помощью агенты могут нажимать кнопки, перемещаться по меню и заполнять формы на экранах, даже если для приложения или сайта нет API. Microsoft выразилась лаконично: «Если человек может использовать приложение, агент тоже сможет».
Ваши ИИ-агенты смогут использовать популярные браузеры, такие как Microsoft Edge, Chrome и Firefox, для выполнения этих задач. Функция работает на серверной части Microsoft, так что вам не придётся беспокоиться о настройке собственных серверов. Все сгенерированные данные остаются в облаке Microsoft и не используются для обучения их моделей ИИ.
Одна из самых крутых особенностей? Эти агенты могут адаптироваться на лету к изменениям в приложениях и веб-сайтах. Если кнопка или макет экрана изменятся, ваш агент всё равно разберётся, что делать, без необходимости ручного обновления с вашей стороны. Кроме того, благодаря способности «видеть» экран, они могут принимать решения в реальном времени, и они оснащены возможностями рассуждения, чтобы справляться с любыми сбоями без вашей помощи.
Вам не нужно знать, как программировать, чтобы создать ИИ-агента. Просто используйте естественный язык, чтобы описать, что вы хотите, чтобы агент делал, в Copilot Studio. Вы можете тестировать и корректировать свои инструкции в симулированном режиме, наблюдая за выполнением шагов, прежде чем выпустить агента на волю. И вы можете просмотреть подробную историю действий вашего агента, включая скриншоты и шаги рассуждений.
В блоге Microsoft были выделены три сценария, в которых эти ИИ-агенты могут проявить себя:
- Автоматизированный ввод данных: Нужно ввести кучу данных из разных источников в центральную систему? ИИ-агент может взять это на себя, сэкономив вам время и усилия.
- Исследование рынка: Маркетологам часто нужно собирать данные из множества онлайн-источников. ИИ-агент может просматривать эти сайты и собирать необходимую информацию автономно.
- Обработка счетов: В финансах часто требуется извлечь данные из счетов и ввести их в бухгалтерскую систему. ИИ-агент может делать это автоматически, обеспечивая доставку данных туда, куда нужно.
Хотя всё это звучит многообещающе, ИИ пока несовершенен. Даже простые ИИ-боты могут ошибаться, а с добавленной сложностью независимого использования компьютера есть риск, что ваш ИИ-агент может сделать неверный клик или отказаться от выполнения задачи.
Настоящее испытание — в действии. Microsoft приглашает пользователей Copilot Studio зарегистрироваться для раннего доступа к функции «использование компьютера». Если вы ещё не используете Copilot Studio, вы можете попробовать её бесплатно. Просто используйте рабочую или учебную учётную запись для настройки, и вы попадёте на главную страницу, где сможете начать описывать, какого агента вы хотите создать.
Интересуетесь другими историями об ИИ? Подпишитесь на нашу еженедельную рассылку Innovation, чтобы получать последние обновления.
Связанная статья
Умные очки Apple могут быть представлены на WWDC27 с акцентом на защиту конфиденциальности
Журналист Bloomberg Марк Гурман сообщает, что умные очки Apple под кодовым названием N50 должны дебютировать на WWDC27 в июне 2027 года, а их розничные продажи ожидаются осенью 2027 года. Изначально выпуск устройства планировался на конец этого года
Внутри раскрыты подробности о Gemini следующего поколения: ограниченные вычислительные мощности, внутренние команды не сошлись в вопросах приоритетов разработки и распределения ресурсов
В отчётах указывается, что запуск долгожданной модели Gemini следующего поколения от Google был перенесён. Внутренние разногласия по вопросам приоритетов разработки и распределения ресурсов, в сочетании с ограниченной вычислительной мощностью и сложн
OpenAI отклоняет опасения по поводу замедления роста, заявляя о ускорении работы нескольких бизнес-подразделений
В ответ на внешнюю критику, связанную с замедлением роста продаж и невыполнением внутренних плановых показателей, лидер в области искусственного интеллекта компания OpenAI опубликовала во вторник, 28 апреля, уверенное заявление. Компания уточнила, чт
Рекомендации по связанным специальным темам
Комментарии (8)
So basically we're giving AI the ability to click buttons... what could possibly go wrong? 😅 But seriously, this could be a game-changer for automating boring tasks. Though I wonder how it handles captchas or weird pop-ups.
Interessant! Klingt fast so, als ob wir bald nur noch zuschauen, während die KI unsere Arbeit erledigt. Hoffentlich denkt Microsoft auch an die Datenschutzfragen, wenn seine Agenten durch Websites surfen... 🤔
AI 에이전트가 웹사이트를 돌아다니면서 실제로 뭔가를 처리한다고? 🤯 진짜라면 일상생활에 정말 도움될 것 같은데... 개인정보 보안 문제는 어떻게 해결했을지 궁금해요. 사기꾼들이 악용할 수도 있지 않나 걱정되네요.
This AI navigating websites is wild! Imagine it booking my flights or shopping for me. But, uh, what if it clicks on sketchy ads? 😅 Needs some guardrails!

Представьте себе ИИ-агента, способного не только искать информацию в интернете, но и взаимодействовать с веб-сайтами, выполняя задачи самостоятельно. Это видение лежит в основе последней инновации Microsoft.
В среду Microsoft представила новую интерактивную функцию для своей платформы Copilot Studio, которая позволяет пользователям создавать собственных ИИ-агентов. Эта функция, названная «использование компьютера», позволяет любому созданному вами агенту перемещаться по настольным приложениям или веб-сайтам и выполнять задачи так же, как это сделал бы человек.
Эта функция внедряется через предварительный доступ для исследований. С её помощью агенты могут нажимать кнопки, перемещаться по меню и заполнять формы на экранах, даже если для приложения или сайта нет API. Microsoft выразилась лаконично: «Если человек может использовать приложение, агент тоже сможет».
Ваши ИИ-агенты смогут использовать популярные браузеры, такие как Microsoft Edge, Chrome и Firefox, для выполнения этих задач. Функция работает на серверной части Microsoft, так что вам не придётся беспокоиться о настройке собственных серверов. Все сгенерированные данные остаются в облаке Microsoft и не используются для обучения их моделей ИИ.
Одна из самых крутых особенностей? Эти агенты могут адаптироваться на лету к изменениям в приложениях и веб-сайтах. Если кнопка или макет экрана изменятся, ваш агент всё равно разберётся, что делать, без необходимости ручного обновления с вашей стороны. Кроме того, благодаря способности «видеть» экран, они могут принимать решения в реальном времени, и они оснащены возможностями рассуждения, чтобы справляться с любыми сбоями без вашей помощи.
Вам не нужно знать, как программировать, чтобы создать ИИ-агента. Просто используйте естественный язык, чтобы описать, что вы хотите, чтобы агент делал, в Copilot Studio. Вы можете тестировать и корректировать свои инструкции в симулированном режиме, наблюдая за выполнением шагов, прежде чем выпустить агента на волю. И вы можете просмотреть подробную историю действий вашего агента, включая скриншоты и шаги рассуждений.
В блоге Microsoft были выделены три сценария, в которых эти ИИ-агенты могут проявить себя:
- Автоматизированный ввод данных: Нужно ввести кучу данных из разных источников в центральную систему? ИИ-агент может взять это на себя, сэкономив вам время и усилия.
- Исследование рынка: Маркетологам часто нужно собирать данные из множества онлайн-источников. ИИ-агент может просматривать эти сайты и собирать необходимую информацию автономно.
- Обработка счетов: В финансах часто требуется извлечь данные из счетов и ввести их в бухгалтерскую систему. ИИ-агент может делать это автоматически, обеспечивая доставку данных туда, куда нужно.
Хотя всё это звучит многообещающе, ИИ пока несовершенен. Даже простые ИИ-боты могут ошибаться, а с добавленной сложностью независимого использования компьютера есть риск, что ваш ИИ-агент может сделать неверный клик или отказаться от выполнения задачи.
Настоящее испытание — в действии. Microsoft приглашает пользователей Copilot Studio зарегистрироваться для раннего доступа к функции «использование компьютера». Если вы ещё не используете Copilot Studio, вы можете попробовать её бесплатно. Просто используйте рабочую или учебную учётную запись для настройки, и вы попадёте на главную страницу, где сможете начать описывать, какого агента вы хотите создать.
Интересуетесь другими историями об ИИ? Подпишитесь на нашу еженедельную рассылку Innovation, чтобы получать последние обновления.
Умные очки Apple могут быть представлены на WWDC27 с акцентом на защиту конфиденциальности
Журналист Bloomberg Марк Гурман сообщает, что умные очки Apple под кодовым названием N50 должны дебютировать на WWDC27 в июне 2027 года, а их розничные продажи ожидаются осенью 2027 года. Изначально выпуск устройства планировался на конец этого года
Внутри раскрыты подробности о Gemini следующего поколения: ограниченные вычислительные мощности, внутренние команды не сошлись в вопросах приоритетов разработки и распределения ресурсов
В отчётах указывается, что запуск долгожданной модели Gemini следующего поколения от Google был перенесён. Внутренние разногласия по вопросам приоритетов разработки и распределения ресурсов, в сочетании с ограниченной вычислительной мощностью и сложн
OpenAI отклоняет опасения по поводу замедления роста, заявляя о ускорении работы нескольких бизнес-подразделений
В ответ на внешнюю критику, связанную с замедлением роста продаж и невыполнением внутренних плановых показателей, лидер в области искусственного интеллекта компания OpenAI опубликовала во вторник, 28 апреля, уверенное заявление. Компания уточнила, чт
So basically we're giving AI the ability to click buttons... what could possibly go wrong? 😅 But seriously, this could be a game-changer for automating boring tasks. Though I wonder how it handles captchas or weird pop-ups.
Interessant! Klingt fast so, als ob wir bald nur noch zuschauen, während die KI unsere Arbeit erledigt. Hoffentlich denkt Microsoft auch an die Datenschutzfragen, wenn seine Agenten durch Websites surfen... 🤔
AI 에이전트가 웹사이트를 돌아다니면서 실제로 뭔가를 처리한다고? 🤯 진짜라면 일상생활에 정말 도움될 것 같은데... 개인정보 보안 문제는 어떻게 해결했을지 궁금해요. 사기꾼들이 악용할 수도 있지 않나 걱정되네요.
This AI navigating websites is wild! Imagine it booking my flights or shopping for me. But, uh, what if it clicks on sketchy ads? 😅 Needs some guardrails!











