Microsoft testet Copilot Vision Update für die Erkennung von Apps auf dem Bildschirm
Microsoft stellt ein verbessertes Copilot-Erlebnis vor, das die Interaktion von Nutzern mit KI in Windows-Anwendungen verändert. Dieses innovative Update erweitert die Fähigkeiten von Copilot Vision über Microsoft Edge hinaus und ermöglicht Echtzeitunterstützung für jede Desktop-Anwendung durch intelligente Bildschirmfreigabefunktionen.
Erweiterte Funktionen
Copilot Vision bietet jetzt kontextbezogene Unterstützung für das gesamte Windows-Ökosystem
KI-gestützte Bildschirmanalyse jetzt für alle PC-Anwendungen verfügbar
Ermöglicht interaktives Coaching für komplexe Software wie Adobe Photoshop
Ermöglicht die visuelle Analyse von Fotos, Dokumenten und Webinhalten im gesamten System
Wird derzeit zunächst für Windows-Insider-Tester in den USA eingeführt
Praktische Anwendungen
Interaktive Software-Anleitung
Der verbesserte Copilot Vision erweist sich als besonders wertvoll bei der Unterstützung von technischen Anwendungen. Bei der jüngsten Demonstration von Microsoft war die KI erfolgreich:
- Schritt-für-Schritt-Anweisungen für das Minecraft-Spiel
- Optimierte Einstellungen für die Videobearbeitung in Clipchamp
- Hervorhebung relevanter Oberflächenelemente bei Software-Tutorials

Im Gegensatz zur umstrittenen Recall-Funktion, die periodische Schnappschüsse aufnimmt, funktioniert Copilot Vision eher wie eine dynamische Screen-Sharing-Sitzung, bei der die KI den sichtbaren Inhalt aktiv interpretiert und darauf reagiert, ohne Bilder dauerhaft zu speichern.
Ergänzende Funktionen
Intelligente Dateisuche
Microsoft testet gleichzeitig eine erweiterte Dateisuchfunktion in Copilot, die:
- Indizierung und Erkennung von Dokumenteninhalten in verschiedenen Formaten
- Unterstützt gängige Dateitypen wie Office-Dokumente und PDFs
- hilft bei der Suche nach kürzlich bearbeiteten Dateien durch Abfragen in natürlicher Sprache
Zugänglichkeit und Verfügbarkeit
Plattform-Unterstützung
- Windows 11 (nicht auf Copilot Plus PCs beschränkt)
- Mobile Versionen für iOS und Android
- Anfängliche Beta-Version beschränkt auf US-Tester
- Geplante öffentliche Markteinführung innerhalb weniger Monate
Voraussetzungen für die Implementierung
Für den Zugriff auf die kommenden Copilot-Erweiterungen benötigen die Nutzer lediglich:
- Die Copilot-Standardanwendung für Windows
- Eine aktive Internetverbindung für die Cloud-Verarbeitung
- Aktualisierte Windows 11-Installation
Microsoft geht davon aus, dass die schrittweise Freigabe dieser KI-Funktionen für alle Windows 11-Nutzer im Laufe dieses Jahres nach erfolgreichen Betatests abgeschlossen sein wird.
Verwandter Artikel
Kakao Mobility stellt einen Fahrplan für autonomes Fahren der Stufe 4 im Bereich der physischen KI vor
Kakao Mobility plant, im Rahmen seiner Strategie für physische KI Technologien für autonomes Fahren der Stufe 4 intern zu entwickeln.Auf der Konferenz „World IT Show 2026“ im COEX in Seoul stellte Ki
Barry Diller: Das Vertrauen in Sam Altman spielt keine Rolle, da die allgemeine künstliche Intelligenz (AGI) immer näher rückt
Barry Diller, der milliardenschwere Medienmogul, hält OpenAI-CEO Sam Altman nicht für unglaubwürdig, obwohl jüngste Berichte das Gegenteil nahelegen. Bei seiner Rede auf der „Future of Everything“-Kon
YouTube weitet die KI-basierte Deepfake-Erkennung auf Politiker, Regierungsvertreter und Journalisten aus
Am Dienstag gab YouTube bekannt, dass es seine Deepfake-Erkennungstechnologie auf eine ausgewählte Gruppe von Regierungsbeamten, politischen Kandidaten und Journalisten ausweiten wird. Das Tool identi
Empfehlungen zu verwandten Spezialthemen
Kommentare (1)
Also Copilot kann jetzt auch andere Apps erkennen? Das ist ja praktisch! Hoffentlich klappt das besser als die automatische Rechtschreibkorrektur in Word... 😅 Aber mal im Ernst, wenn das wirklich zuverlässig funktioniert, könnte es die tägliche Arbeit echt beschleunigen. Ich frage mich nur, wie das mit Datenschutz aussieht – schließlich 'sieht' die KI dann ja alles auf meinem Bildschirm.
Microsoft stellt ein verbessertes Copilot-Erlebnis vor, das die Interaktion von Nutzern mit KI in Windows-Anwendungen verändert. Dieses innovative Update erweitert die Fähigkeiten von Copilot Vision über Microsoft Edge hinaus und ermöglicht Echtzeitunterstützung für jede Desktop-Anwendung durch intelligente Bildschirmfreigabefunktionen.
Erweiterte Funktionen
Copilot Vision bietet jetzt kontextbezogene Unterstützung für das gesamte Windows-Ökosystem
KI-gestützte Bildschirmanalyse jetzt für alle PC-Anwendungen verfügbar
Ermöglicht interaktives Coaching für komplexe Software wie Adobe Photoshop
Ermöglicht die visuelle Analyse von Fotos, Dokumenten und Webinhalten im gesamten System
Wird derzeit zunächst für Windows-Insider-Tester in den USA eingeführt
Praktische Anwendungen
Interaktive Software-Anleitung
Der verbesserte Copilot Vision erweist sich als besonders wertvoll bei der Unterstützung von technischen Anwendungen. Bei der jüngsten Demonstration von Microsoft war die KI erfolgreich:
- Schritt-für-Schritt-Anweisungen für das Minecraft-Spiel
- Optimierte Einstellungen für die Videobearbeitung in Clipchamp
- Hervorhebung relevanter Oberflächenelemente bei Software-Tutorials

Im Gegensatz zur umstrittenen Recall-Funktion, die periodische Schnappschüsse aufnimmt, funktioniert Copilot Vision eher wie eine dynamische Screen-Sharing-Sitzung, bei der die KI den sichtbaren Inhalt aktiv interpretiert und darauf reagiert, ohne Bilder dauerhaft zu speichern.
Ergänzende Funktionen
Intelligente Dateisuche
Microsoft testet gleichzeitig eine erweiterte Dateisuchfunktion in Copilot, die:
- Indizierung und Erkennung von Dokumenteninhalten in verschiedenen Formaten
- Unterstützt gängige Dateitypen wie Office-Dokumente und PDFs
- hilft bei der Suche nach kürzlich bearbeiteten Dateien durch Abfragen in natürlicher Sprache
Zugänglichkeit und Verfügbarkeit
Plattform-Unterstützung
- Windows 11 (nicht auf Copilot Plus PCs beschränkt)
- Mobile Versionen für iOS und Android
- Anfängliche Beta-Version beschränkt auf US-Tester
- Geplante öffentliche Markteinführung innerhalb weniger Monate
Voraussetzungen für die Implementierung
Für den Zugriff auf die kommenden Copilot-Erweiterungen benötigen die Nutzer lediglich:
- Die Copilot-Standardanwendung für Windows
- Eine aktive Internetverbindung für die Cloud-Verarbeitung
- Aktualisierte Windows 11-Installation
Microsoft geht davon aus, dass die schrittweise Freigabe dieser KI-Funktionen für alle Windows 11-Nutzer im Laufe dieses Jahres nach erfolgreichen Betatests abgeschlossen sein wird.
Barry Diller: Das Vertrauen in Sam Altman spielt keine Rolle, da die allgemeine künstliche Intelligenz (AGI) immer näher rückt
Barry Diller, der milliardenschwere Medienmogul, hält OpenAI-CEO Sam Altman nicht für unglaubwürdig, obwohl jüngste Berichte das Gegenteil nahelegen. Bei seiner Rede auf der „Future of Everything“-Kon
YouTube weitet die KI-basierte Deepfake-Erkennung auf Politiker, Regierungsvertreter und Journalisten aus
Am Dienstag gab YouTube bekannt, dass es seine Deepfake-Erkennungstechnologie auf eine ausgewählte Gruppe von Regierungsbeamten, politischen Kandidaten und Journalisten ausweiten wird. Das Tool identi
Also Copilot kann jetzt auch andere Apps erkennen? Das ist ja praktisch! Hoffentlich klappt das besser als die automatische Rechtschreibkorrektur in Word... 😅 Aber mal im Ernst, wenn das wirklich zuverlässig funktioniert, könnte es die tägliche Arbeit echt beschleunigen. Ich frage mich nur, wie das mit Datenschutz aussieht – schließlich 'sieht' die KI dann ja alles auf meinem Bildschirm.





Heim






