Mit Microsoft kann Copilot Studio den Computer unabhängig bedienen

Diese Woche hat Microsoft eine spannende neue Funktion für Copilot Studio namens „Computerbenutzung“ eingeführt, die es KI-Agenten ermöglicht, mit Websites und Desktop-Anwendungen auf eine Weise zu interagieren, die fast menschlich wirkt. Stellen Sie es sich so vor, als würden Sie Ihrer KI ein Paar digitale Hände geben, um Schaltflächen zu klicken, Menüs zu navigieren und in Felder auf dem Bildschirm zu tippen. Das ist ein echter Wendepunkt, insbesondere für Unternehmen, die Aufgaben automatisieren möchten, ohne direkte API-Verbindungen zu benötigen.

Charles Lamanna, der Vizepräsident für Microsofts Business & Industry Copilot, hat es so formuliert: „Die Computerbenutzung ermöglicht es Agenten, mit Websites und Desktop-Apps zu interagieren, indem sie Schaltflächen klicken, Menüs auswählen und in Felder auf dem Bildschirm tippen. Dies erlaubt es Agenten, Aufgaben zu bewältigen, selbst wenn keine API verfügbar ist, um direkt mit dem System verbunden zu sein. Wenn ein Mensch die App nutzen kann, kann es der Agent auch.“ Es ist, als würde man der KI eine Lizenz geben, jedes Softwaretool zu bedienen, das Sie täglich nutzen.

Mit dieser neuen Fähigkeit kann Copilot Studio KI-Agenten erstellen, die eine Vielzahl von Aufgaben übernehmen, von der Dateneingabe über Marktforschung bis hin zur Rechnungsverarbeitung. Darüber hinaus sind diese KI-Agenten intelligent genug, sich anzupassen, wenn Apps oder Websites ihre Benutzeroberflächen aktualisieren. Sie hören nicht einfach auf zu funktionieren, nur weil sich eine Schaltfläche verschoben oder ein Bildschirm verändert hat; sie machen weiter und stellen sicher, dass Ihre Automatisierung auf Kurs bleibt.

Microsoft hört hier nicht auf. Anfang dieses Monats haben sie eine ähnliche Funktion namens Actions für ihren Consumer Copilot eingeführt. Diese Actions können im Hintergrund laufen und ermöglichen es Ihnen, sich auf andere Aufgaben zu konzentrieren, während Copilot Ihre Restaurantreservierungen vornimmt, Veranstaltungstickets sichert oder für Sie online einkauft. Allerdings ist die Actions-Funktion derzeit auf eine ausgewählte Gruppe von Partnern beschränkt. Andererseits scheint die „Computerbenutzung“-Funktion von Copilot Studio darauf ausgelegt zu sein, mit einer breiteren Palette von Websites und Apps gut zusammenzuspielen und Unternehmen mehr Flexibilität zu bieten.