Microsoft continue d’étendre les capacités de son assistant IA avec Copilot Vision, désormais disponible gratuitement dans le navigateur Edge. L’annonce a été faite par Mustafa Suleyman, PDG de Microsoft AI, sur la plateforme Bluesky. Cette fonctionnalité permet à Copilot d’analyser ce qui est affiché à l’écran en temps réel, pour offrir une assistance contextuelle à la voix.
Baptisée « expérience basée sur la parole », Copilot Vision vous permet de parler naturellement à votre ordinateur pour obtenir de l’aide. Une fois activée, cette fonction permet à l’IA de « voir ce que vous voyez » à l’écran, sans avoir à cliquer nulle part.
Par exemple, vous pouvez :
- Suivre une recette de cuisine à l’écran pendant que vous préparez un plat.
- Analyser une offre d’emploi pour générer une lettre de motivation personnalisée ou préparer un entretien.
- Mettre en évidence les éléments pertinents d’une page web, comme une infographie ou un tableau.
Cependant, Copilot Vision ne prend pas le contrôle de votre ordinateur : il ne clique pas, n’écrit pas, et ne remplace aucune action utilisateur. Il agit uniquement comme un guide visuel et vocal.
Comment activer Copilot Vision dans Microsoft Edge ?
- Ouvrez ce lien officiel de Microsoft dans Microsoft Edge.
- Une fenêtre contextuelle vous invitera à activer la fonctionnalité.
- Une fois activée, ouvrez le panneau Copilot, cliquez sur l’icône du micro, et commencez à parler.
- Vous entendrez un signal sonore et le navigateur changera légèrement de teinte pour signaler que la session est active.
Attention : sur certains appareils, l’activation peut prendre plusieurs essais, notamment sur les configurations plus anciennes.
Bien que Copilot Vision soit gratuit dans Edge, ses fonctionnalités étendues (comme l’assistance dans des logiciels comme Photoshop, des jeux comme Minecraft, ou des éditeurs vidéo) restent réservées aux abonnés Copilot Pro.
Ces abonnés peuvent profiter de Copilot Vision à l’échelle du système, pas seulement dans le navigateur, ce qui en fait un véritable assistant numérique multifonction.
Respect de la vie privée et sécurité
Microsoft précise que pendant une session Copilot Vision :
- Seules les réponses de l’IA sont enregistrées.
- Vos images, données d’écran et saisies ne sont pas collectées.
- Vous pouvez mettre fin à la session à tout moment ou simplement fermer votre navigateur.
Copilot Vision représente une avancée majeure vers une intégration fluide de l’IA dans les usages quotidiens. Disponible gratuitement dans Edge, elle montre comment l’IA peut s’adapter à vos besoins en temps réel sans compromettre votre sécurité ou votre vie privée.
