KI -Agenten erlangen neue Fähigkeiten, Websites und Apps mit den neuesten Fähigkeiten von Copilot Studio zu navigieren

Stellen Sie sich einen KI-Agenten vor, der nicht nur im Internet nach Informationen sucht, sondern tatsächlich mit Websites interagiert, um Aufgaben selbstständig zu erledigen. Das ist die Vision hinter Microsofts neuester Innovation.

Am Mittwoch stellte Microsoft eine neue interaktive Fähigkeit für seine Copilot Studio-Plattform vor, mit der Benutzer ihre eigenen KI-Agenten erstellen können. Diese Fähigkeit, genannt „Computernutzung“, ermöglicht es jedem von Ihnen erstellten Agenten, Desktop-Anwendungen oder Websites zu navigieren und zu bedienen und Aufgaben genauso auszuführen wie ein Mensch.

Diese Funktion wird über eine frühe Forschungsvorschau eingeführt. Damit können Agenten Schaltflächen klicken, Menüs navigieren und Formulare auf Bildschirmen ausfüllen, selbst wenn keine API für die App oder Website verfügbar ist. Microsoft bringt es prägnant auf den Punkt: „Wenn ein Mensch die App nutzen kann, kann es der Agent auch.“

Ihre KI-Agenten werden gängige Browser wie Microsoft Edge, Chrome und Firefox nutzen können, um diese Aufgaben auszuführen. Die Funktion läuft auf Microsofts Backend, sodass Sie sich keine Gedanken über die Einrichtung eigener Server machen müssen. Alle generierten Daten bleiben in der Microsoft-Cloud und werden nicht verwendet, um deren KI-Modelle zu trainieren.

Einer der coolsten Aspekte? Diese Agenten können sich spontan an Änderungen in Apps und Websites anpassen. Wenn sich eine Schaltfläche oder das Layout eines Bildschirms ändert, kann Ihr Agent dennoch herausfinden, was zu tun ist, ohne dass Sie manuelle Updates vornehmen müssen. Außerdem können sie den Bildschirm „sehen“, in Echtzeit Entscheidungen treffen und sind mit Argumentationsfähigkeiten ausgestattet, um Probleme ohne Ihre Hilfe zu bewältigen.

Sie müssen nicht programmieren können, um einen KI-Agenten zu erstellen. Verwenden Sie einfach natürliche Sprache, um in Copilot Studio zu beschreiben, was der Agent tun soll. Sie können Ihre Anweisungen in einem simulierten Modus testen und anpassen und die Schritte beobachten, bevor Sie Ihren Agenten freigeben. Und Sie können eine detaillierte Historie der Aktionen Ihres Agenten einsehen, komplett mit Screenshots und Argumentationsschritten.

Microsofts Blogbeitrag hob drei Szenarien hervor, in denen diese KI-Agenten glänzen könnten:

• Automatisierte Dateneingabe: Müssen Sie Unmengen an Daten aus verschiedenen Quellen in ein zentrales System eingeben? Ein KI-Agent kann Ihnen diese Arbeit abnehmen und Zeit sowie Mühe sparen.
• Marktforschung: Marketingfachleute müssen oft Daten aus mehreren Online-Quellen sammeln. Ein KI-Agent könnte diese Websites durchsuchen und die benötigten Informationen autonom sammeln.
• Rechnungsverarbeitung: Im Finanzbereich ist das Extrahieren von Daten aus Rechnungen und deren Eingabe in ein Buchhaltungssystem üblich. Ein KI-Agent könnte dies automatisch erledigen und sicherstellen, dass die Daten an den richtigen Ort gelangen.

Obwohl das alles vielversprechend klingt, ist KI noch nicht perfekt. Selbst einfache KI-Bots können Fehler machen, und mit der zusätzlichen Komplexität der unabhängigen Computernutzung besteht das Risiko, dass Ihr KI-Agent einen falschen Klick macht oder seine Aufgabe abbricht.

Der wahre Test liegt in der Umsetzung. Microsoft lädt Copilot Studio-Benutzer ein, sich für den frühen Zugang zu dieser „Computernutzung“-Funktion anzumelden. Wenn Sie Copilot Studio noch nicht nutzen, können Sie es kostenlos ausprobieren. Verwenden Sie einfach ein Arbeits- oder Schulkonto, um es einzurichten, und Sie landen auf der Hauptseite, wo Sie beginnen können, die Art von Agent zu beschreiben, die Sie erstellen möchten.

Interessiert an weiteren KI-Geschichten? Abonnieren Sie unseren wöchentlichen Newsletter, Innovation, für die neuesten Updates.