Microsoft Copilot améliore désormais le bord avec la capacité de visualisation de l'écran

L'assistant IA de Microsoft, Copilot Vision, qui peut analyser votre écran et aider dans diverses tâches, est désormais accessible gratuitement dans le navigateur Edge. Cette mise à jour excitante a été partagée par le PDG de Microsoft AI, Mustafa Suleyman, via Bluesky aujourd'hui. Copilot Vision offre une expérience unique basée sur la parole, où vous donnez simplement vos commandes vocalement et attendez la réponse de Copilot.

Selon Suleyman, si vous choisissez d'activer Copilot Vision, il peut "littéralement voir ce que vous voyez à l'écran". Imaginez qu'il vous guide à travers une recette pendant que vous cuisinez, ou même qu'il décrypte des descriptions de poste pour vous aider à préparer des entretiens ou à brainstormer des idées de lettres de motivation. Cependant, il est bon de noter que l'utilisation de l'IA pour votre CV n'est pas toujours la meilleure approche. Selon la page de support de Microsoft, Copilot Vision peut surligner des parties de votre écran pour repérer des informations pertinentes, mais il ne cliquera pas sur les liens ni n'agira en votre nom.

Bien que les fonctionnalités plus larges, au niveau du système, de Copilot Vision restent exclusives aux abonnés de Copilot Pro, la version gratuite dans Edge est déjà assez puissante. Avec un abonnement, Vision peut s'étendre au-delà d'Edge pour aider dans des tâches dans des applications comme Photoshop ou des logiciels de montage vidéo, ou même vous guider dans des jeux comme *Minecraft*, comme l'a démontré Tom Warren de *The Verge* plus tôt ce mois-ci.

Pour essayer Copilot Vision, ouvrez simplement ce lien vers le site de Microsoft dans le navigateur Edge. Vous devriez être invité à activer la fonctionnalité. Une fois que vous aurez donné votre autorisation, vous pourrez activer la barre latérale Copilot sur n'importe quel site web, cliquer sur l'icône du microphone, et démarrer votre session Vision, qui sera signalée par un carillon et un changement de teinte de votre navigateur.

Cependant, mon expérience n'a pas été aussi fluide que prévu. Il a fallu plusieurs tentatives avant qu'Edge ne me demande d'activer la fonctionnalité, et même après avoir activé et démarré une session Vision, les contrôles n'apparaissaient pas. À la place, j'avais un message persistant disant "Un instant…" en bas de mon navigateur. Gardez à l'esprit que j'utilise un ordinateur portable plus ancien et moins puissant, donc votre expérience pourrait être différente.

Microsoft assure aux utilisateurs que, bien qu'ils enregistrent les réponses de Copilot, ils ne collectent pas vos entrées, images ou contenu de page pendant une session Copilot Vision. Pour arrêter de partager votre écran, vous pouvez mettre fin à la session ou simplement fermer la fenêtre du navigateur.