Heim
KI -Agenten erlangen neue Fähigkeiten, Websites und Apps mit den neuesten Fähigkeiten von Copilot Studio zu navigieren

Stellen Sie sich einen KI-Agenten vor, der nicht nur im Internet nach Informationen sucht, sondern tatsächlich mit Websites interagiert, um Aufgaben selbstständig zu erledigen. Das ist die Vision hinter Microsofts neuester Innovation.
Am Mittwoch stellte Microsoft eine neue interaktive Fähigkeit für seine Copilot Studio-Plattform vor, mit der Benutzer ihre eigenen KI-Agenten erstellen können. Diese Fähigkeit, genannt „Computernutzung“, ermöglicht es jedem von Ihnen erstellten Agenten, Desktop-Anwendungen oder Websites zu navigieren und zu bedienen und Aufgaben genauso auszuführen wie ein Mensch.
Diese Funktion wird über eine frühe Forschungsvorschau eingeführt. Damit können Agenten Schaltflächen klicken, Menüs navigieren und Formulare auf Bildschirmen ausfüllen, selbst wenn keine API für die App oder Website verfügbar ist. Microsoft bringt es prägnant auf den Punkt: „Wenn ein Mensch die App nutzen kann, kann es der Agent auch.“
Ihre KI-Agenten werden gängige Browser wie Microsoft Edge, Chrome und Firefox nutzen können, um diese Aufgaben auszuführen. Die Funktion läuft auf Microsofts Backend, sodass Sie sich keine Gedanken über die Einrichtung eigener Server machen müssen. Alle generierten Daten bleiben in der Microsoft-Cloud und werden nicht verwendet, um deren KI-Modelle zu trainieren.
Einer der coolsten Aspekte? Diese Agenten können sich spontan an Änderungen in Apps und Websites anpassen. Wenn sich eine Schaltfläche oder das Layout eines Bildschirms ändert, kann Ihr Agent dennoch herausfinden, was zu tun ist, ohne dass Sie manuelle Updates vornehmen müssen. Außerdem können sie den Bildschirm „sehen“, in Echtzeit Entscheidungen treffen und sind mit Argumentationsfähigkeiten ausgestattet, um Probleme ohne Ihre Hilfe zu bewältigen.
Sie müssen nicht programmieren können, um einen KI-Agenten zu erstellen. Verwenden Sie einfach natürliche Sprache, um in Copilot Studio zu beschreiben, was der Agent tun soll. Sie können Ihre Anweisungen in einem simulierten Modus testen und anpassen und die Schritte beobachten, bevor Sie Ihren Agenten freigeben. Und Sie können eine detaillierte Historie der Aktionen Ihres Agenten einsehen, komplett mit Screenshots und Argumentationsschritten.
Microsofts Blogbeitrag hob drei Szenarien hervor, in denen diese KI-Agenten glänzen könnten:
- Automatisierte Dateneingabe: Müssen Sie Unmengen an Daten aus verschiedenen Quellen in ein zentrales System eingeben? Ein KI-Agent kann Ihnen diese Arbeit abnehmen und Zeit sowie Mühe sparen.
- Marktforschung: Marketingfachleute müssen oft Daten aus mehreren Online-Quellen sammeln. Ein KI-Agent könnte diese Websites durchsuchen und die benötigten Informationen autonom sammeln.
- Rechnungsverarbeitung: Im Finanzbereich ist das Extrahieren von Daten aus Rechnungen und deren Eingabe in ein Buchhaltungssystem üblich. Ein KI-Agent könnte dies automatisch erledigen und sicherstellen, dass die Daten an den richtigen Ort gelangen.
Obwohl das alles vielversprechend klingt, ist KI noch nicht perfekt. Selbst einfache KI-Bots können Fehler machen, und mit der zusätzlichen Komplexität der unabhängigen Computernutzung besteht das Risiko, dass Ihr KI-Agent einen falschen Klick macht oder seine Aufgabe abbricht.
Der wahre Test liegt in der Umsetzung. Microsoft lädt Copilot Studio-Benutzer ein, sich für den frühen Zugang zu dieser „Computernutzung“-Funktion anzumelden. Wenn Sie Copilot Studio noch nicht nutzen, können Sie es kostenlos ausprobieren. Verwenden Sie einfach ein Arbeits- oder Schulkonto, um es einzurichten, und Sie landen auf der Hauptseite, wo Sie beginnen können, die Art von Agent zu beschreiben, die Sie erstellen möchten.
Interessiert an weiteren KI-Geschichten? Abonnieren Sie unseren wöchentlichen Newsletter, Innovation, für die neuesten Updates.
Verwandter Artikel
Apple Smart Glasses könnten auf der WWDC27 vorgestellt werden und dabei den Schutz der Privatsphäre in den Mittelpunkt stellen
Bloombergs Mark Gurman berichtet, dass Apples Smart Glasses mit dem Codenamen N50 im Juni 2027 auf der WWDC27 vorgestellt werden sollen, wobei ein Verkaufsstart im Herbst 2027 erwartet wird. Ursprünglich für Ende dieses Jahres und Anfang 2027 geplant
Inside Details Exposed About Next-Gen Gemini: Strained Computing Power, Internal Teams Disagreed on Development Priorities and Resource Allocation
Berichten zufolge wurde der Start des hocherwarteten Next-Generation-Gemini-Modells von Google verschoben. Interne Uneinigkeiten über Entwicklungsprioritäten und Ressourcenallokation, kombiniert mit begrenzter Rechenkapazität und komplexen Genehmigun
OpenAI entkräftet Bedenken bezüglich des verlangsamen Wachstums und erklärt, dass mehrere Geschäftsbereiche ihre Expansion beschleunigen
Als Reaktion auf externe Kritik bezüglich des nachlassenden Umsatzwachstums und verpasster interner Zielvorgaben gab der KI-Pionier OpenAI am Dienstag, den 28. April, eine selbstbewusste Erklärung ab. Das Unternehmen präzisierte, dass seine Verbrauch
Empfehlungen zu verwandten Spezialthemen
Kommentare (8)
So basically we're giving AI the ability to click buttons... what could possibly go wrong? 😅 But seriously, this could be a game-changer for automating boring tasks. Though I wonder how it handles captchas or weird pop-ups.
Interessant! Klingt fast so, als ob wir bald nur noch zuschauen, während die KI unsere Arbeit erledigt. Hoffentlich denkt Microsoft auch an die Datenschutzfragen, wenn seine Agenten durch Websites surfen... 🤔
AI 에이전트가 웹사이트를 돌아다니면서 실제로 뭔가를 처리한다고? 🤯 진짜라면 일상생활에 정말 도움될 것 같은데... 개인정보 보안 문제는 어떻게 해결했을지 궁금해요. 사기꾼들이 악용할 수도 있지 않나 걱정되네요.
This AI navigating websites is wild! Imagine it booking my flights or shopping for me. But, uh, what if it clicks on sketchy ads? 😅 Needs some guardrails!

Stellen Sie sich einen KI-Agenten vor, der nicht nur im Internet nach Informationen sucht, sondern tatsächlich mit Websites interagiert, um Aufgaben selbstständig zu erledigen. Das ist die Vision hinter Microsofts neuester Innovation.
Am Mittwoch stellte Microsoft eine neue interaktive Fähigkeit für seine Copilot Studio-Plattform vor, mit der Benutzer ihre eigenen KI-Agenten erstellen können. Diese Fähigkeit, genannt „Computernutzung“, ermöglicht es jedem von Ihnen erstellten Agenten, Desktop-Anwendungen oder Websites zu navigieren und zu bedienen und Aufgaben genauso auszuführen wie ein Mensch.
Diese Funktion wird über eine frühe Forschungsvorschau eingeführt. Damit können Agenten Schaltflächen klicken, Menüs navigieren und Formulare auf Bildschirmen ausfüllen, selbst wenn keine API für die App oder Website verfügbar ist. Microsoft bringt es prägnant auf den Punkt: „Wenn ein Mensch die App nutzen kann, kann es der Agent auch.“
Ihre KI-Agenten werden gängige Browser wie Microsoft Edge, Chrome und Firefox nutzen können, um diese Aufgaben auszuführen. Die Funktion läuft auf Microsofts Backend, sodass Sie sich keine Gedanken über die Einrichtung eigener Server machen müssen. Alle generierten Daten bleiben in der Microsoft-Cloud und werden nicht verwendet, um deren KI-Modelle zu trainieren.
Einer der coolsten Aspekte? Diese Agenten können sich spontan an Änderungen in Apps und Websites anpassen. Wenn sich eine Schaltfläche oder das Layout eines Bildschirms ändert, kann Ihr Agent dennoch herausfinden, was zu tun ist, ohne dass Sie manuelle Updates vornehmen müssen. Außerdem können sie den Bildschirm „sehen“, in Echtzeit Entscheidungen treffen und sind mit Argumentationsfähigkeiten ausgestattet, um Probleme ohne Ihre Hilfe zu bewältigen.
Sie müssen nicht programmieren können, um einen KI-Agenten zu erstellen. Verwenden Sie einfach natürliche Sprache, um in Copilot Studio zu beschreiben, was der Agent tun soll. Sie können Ihre Anweisungen in einem simulierten Modus testen und anpassen und die Schritte beobachten, bevor Sie Ihren Agenten freigeben. Und Sie können eine detaillierte Historie der Aktionen Ihres Agenten einsehen, komplett mit Screenshots und Argumentationsschritten.
Microsofts Blogbeitrag hob drei Szenarien hervor, in denen diese KI-Agenten glänzen könnten:
- Automatisierte Dateneingabe: Müssen Sie Unmengen an Daten aus verschiedenen Quellen in ein zentrales System eingeben? Ein KI-Agent kann Ihnen diese Arbeit abnehmen und Zeit sowie Mühe sparen.
- Marktforschung: Marketingfachleute müssen oft Daten aus mehreren Online-Quellen sammeln. Ein KI-Agent könnte diese Websites durchsuchen und die benötigten Informationen autonom sammeln.
- Rechnungsverarbeitung: Im Finanzbereich ist das Extrahieren von Daten aus Rechnungen und deren Eingabe in ein Buchhaltungssystem üblich. Ein KI-Agent könnte dies automatisch erledigen und sicherstellen, dass die Daten an den richtigen Ort gelangen.
Obwohl das alles vielversprechend klingt, ist KI noch nicht perfekt. Selbst einfache KI-Bots können Fehler machen, und mit der zusätzlichen Komplexität der unabhängigen Computernutzung besteht das Risiko, dass Ihr KI-Agent einen falschen Klick macht oder seine Aufgabe abbricht.
Der wahre Test liegt in der Umsetzung. Microsoft lädt Copilot Studio-Benutzer ein, sich für den frühen Zugang zu dieser „Computernutzung“-Funktion anzumelden. Wenn Sie Copilot Studio noch nicht nutzen, können Sie es kostenlos ausprobieren. Verwenden Sie einfach ein Arbeits- oder Schulkonto, um es einzurichten, und Sie landen auf der Hauptseite, wo Sie beginnen können, die Art von Agent zu beschreiben, die Sie erstellen möchten.
Interessiert an weiteren KI-Geschichten? Abonnieren Sie unseren wöchentlichen Newsletter, Innovation, für die neuesten Updates.
Apple Smart Glasses könnten auf der WWDC27 vorgestellt werden und dabei den Schutz der Privatsphäre in den Mittelpunkt stellen
Bloombergs Mark Gurman berichtet, dass Apples Smart Glasses mit dem Codenamen N50 im Juni 2027 auf der WWDC27 vorgestellt werden sollen, wobei ein Verkaufsstart im Herbst 2027 erwartet wird. Ursprünglich für Ende dieses Jahres und Anfang 2027 geplant
Inside Details Exposed About Next-Gen Gemini: Strained Computing Power, Internal Teams Disagreed on Development Priorities and Resource Allocation
Berichten zufolge wurde der Start des hocherwarteten Next-Generation-Gemini-Modells von Google verschoben. Interne Uneinigkeiten über Entwicklungsprioritäten und Ressourcenallokation, kombiniert mit begrenzter Rechenkapazität und komplexen Genehmigun
OpenAI entkräftet Bedenken bezüglich des verlangsamen Wachstums und erklärt, dass mehrere Geschäftsbereiche ihre Expansion beschleunigen
Als Reaktion auf externe Kritik bezüglich des nachlassenden Umsatzwachstums und verpasster interner Zielvorgaben gab der KI-Pionier OpenAI am Dienstag, den 28. April, eine selbstbewusste Erklärung ab. Das Unternehmen präzisierte, dass seine Verbrauch
So basically we're giving AI the ability to click buttons... what could possibly go wrong? 😅 But seriously, this could be a game-changer for automating boring tasks. Though I wonder how it handles captchas or weird pop-ups.
Interessant! Klingt fast so, als ob wir bald nur noch zuschauen, während die KI unsere Arbeit erledigt. Hoffentlich denkt Microsoft auch an die Datenschutzfragen, wenn seine Agenten durch Websites surfen... 🤔
AI 에이전트가 웹사이트를 돌아다니면서 실제로 뭔가를 처리한다고? 🤯 진짜라면 일상생활에 정말 도움될 것 같은데... 개인정보 보안 문제는 어떻게 해결했을지 궁금해요. 사기꾼들이 악용할 수도 있지 않나 걱정되네요.
This AI navigating websites is wild! Imagine it booking my flights or shopping for me. But, uh, what if it clicks on sketchy ads? 😅 Needs some guardrails!











