Tencent dévoile Marvis, un assistant IA intégré au système d'exploitation, doté de fonctionnalités de contrôle multi-appareils et d'un mode de confidentialité local

Le 20 mai, Tencent a annoncé le lancement officiel de Marvis, un assistant IA au niveau du système d’exploitation désormais disponible en téléchargement sur le site officiel (Marvis.qq.com) sans code d’invitation. Au-delà des fonctionnalités standard d’un agent IA, Marvis offre une gestion plus intelligente du système et des fichiers, une transition plus sûre entre le traitement sur l’appareil et le cloud, une utilisation plus accessible des services de l’agent, ainsi qu’une collaboration inter-appareils plus fluide, le tout reposant sur une compréhension approfondie des systèmes informatiques, de la puissance de calcul, des fichiers, des applications et d’autres informations.

Contrairement aux outils conversationnels d’IA traditionnels ou aux agents dédiés à une seule application, Marvis s’articule autour du « niveau du système d’exploitation ». Il intègre le système terminal, les fichiers, les applications, la puissance de calcul et les connexions entre appareils au sein d’une seule couche intermédiaire d’IA : les utilisateurs n’ont plus besoin de mémoriser les points d’accès à la configuration, les chemins d’accès aux fichiers ou les étapes d’utilisation des logiciels. Il leur suffit d’exprimer leur objectif en une seule phrase : Marvis comprend alors la tâche, la décompose en étapes, fait appel à l’agent approprié pour l’exécuter et demande confirmation à l’utilisateur à des moments clés, notamment en matière de confidentialité, de sécurité et de paiements.

Compréhension au niveau du système d’exploitation : rendre les ordinateurs plus intelligents

Marvis transforme l’ordinateur tout entier en un « objet intelligent » capable d’accéder directement au niveau système, permettant ainsi un véritable contrôle en boucle fermée, des paramètres système au traitement des données. En une seule phrase, les utilisateurs peuvent consulter, rechercher et modifier les paramètres système de Windows : ils peuvent s’informer sur la configuration de l’ordinateur, l’état de la batterie ou l’état du réseau, ou demander à Marvis de vérifier si le matériel est capable de faire tourner un jeu de manière fluide. Ils peuvent également ajuster les paramètres système, optimiser les éléments de démarrage et nettoyer les fichiers redondants via le chat.

Pour les utilisateurs novices et les seniors, cela facilite l’accès aux paramètres système et au dépannage ; pour les utilisateurs professionnels, cela transforme les tâches dispersées de configuration, de recherche et de traitement en un point d’accès plus pratique.

S'appuyant sur cette base, Marvis combine plusieurs modèles locaux pour comprendre les fichiers, ce qui permet aux utilisateurs d’effectuer des recherches dans le contenu des fichiers et des images, de reconnaître du texte dans les images, et propose des fonctionnalités telles que des albums photo et des bibliothèques de documents basés sur l’IA, organisés par personnes, thèmes de contenu, jours fériés et lieux. Cela aide les utilisateurs à créer une base de connaissances personnalisée et résout le problème de ne pas retrouver de fichiers lorsqu’on ne se souvient plus du nom du fichier.

En matière de sécurité, Marvis met en place un mécanisme de sécurité de niveau L2 qui impose une « demande de confirmation rigoureuse » : les actions sensibles telles que la suppression ou la modification de fichiers et l’ajustement des configurations système essentielles présentent d’abord un plan d’exécution et demandent la confirmation de l’utilisateur ; les actions à plus haut niveau de sensibilité, comme les paiements, doivent être effectuées par l’utilisateur lui-même.

Modèles optionnels sur l’appareil : les données restent sur votre ordinateur, aucun téléchargement vers le cloud

Marvis propose deux modes de fonctionnement : le « mode Efficacité » et le « mode Confidentialité », permettant à chaque utilisateur de choisir en fonction de la nature de la tâche et de la configuration matérielle. Pour les tâches quotidiennes, le mode Efficacité combine traitement sur l’appareil et dans le cloud : la compréhension et la planification de problèmes complexes peuvent s’appuyer sur des modèles cloud, tandis que le traitement des fichiers, les actions d’exécution et l’indexation locale sont gérés autant que possible sur l’appareil pour une réponse plus rapide et une expérience plus stable.

Le « Mode Confidentialité » utilise exclusivement des modèles sur l’appareil, garantissant que l’analyse des données, la reconnaissance d’images et les conversations s’effectuent localement sans aucun transfert vers le cloud. Cela répond aux besoins des secteurs exigeant une sécurité élevée des données, tels que la finance, le droit et les ressources humaines. Même sans accès à Internet, l’application peut être utilisée normalement.

Cette collaboration entre l’appareil et le cloud ne se résume pas à un simple choix entre « local ou cloud », mais décompose les tâches en différents niveaux : les tâches pouvant être réalisées localement sont traitées localement, et les capacités du cloud ne sont sollicitées qu’en cas de nécessité. Grâce à un prétraitement approfondi sur l’appareil, Marvis réduit considérablement la consommation de jetons cloud pour des tâches telles que la recherche d’images et la compréhension de fichiers, ce qui diminue les coûts d’utilisation et minimise les transferts de données inutiles.

Plusieurs agents préinstallés : se mettre au travail immédiatement

La plupart des produits d’agents courants exigent que les utilisateurs mettent en place des flux de travail ou configurent manuellement les compétences avant utilisation. Marvis est livré avec un système de collaboration multi-agents préinstallé.

Une « équipe d’IA » composée de six agents est disponible 24 h/24 et 7 j/7 : l’agent principal assure la coordination globale, comprend les besoins, décompose les tâches et planifie leur exécution par les autres agents ; l’agent « Fichier » agit en tant que gestionnaire de ressources numériques, s’occupant de la recherche, de la lecture, de l’édition, de la génération et de la conversion de format des fichiers ; l’agent « Ordinateur » fait office de spécialiste de la maintenance du système Windows, gérant les configurations de bas niveau et l’automatisation ; l’agent « Application » gère les opérations liées aux applications, en lançant des applications et des fichiers .exe sur l’ordinateur ; l’agent « Navigateur » est un spécialiste de l’interaction web, prenant en charge les pages web pour l’interaction et l’extraction de données ; l’agent « Recherche » est un expert en recherche sur le Web et en agrégation d’informations ; il localise rapidement des réponses issues de ressources publiques et fournit des références clés. Les utilisateurs peuvent émettre une seule instruction, et plusieurs agents peuvent la traiter en parallèle, affichant la progression et les résultats via des journaux d’exécution et des zones de sortie.

Ce « mode multi-agents préchargé » facilite la prise en main pour les utilisateurs. Par exemple, les utilisateurs peuvent demander à Marvis de rechercher les factures du dernier trimestre et de les organiser dans un tableau par ordre chronologique ; ils peuvent également lui demander de surveiller régulièrement les prix des vols, de suivre les mises à jour d’un site web spécifique ou d’organiser des contenus en vue d’une publication multiplateforme.

Contrôle visuel multi-appareils : une collaboration plus pratique

Marvis dispose de puissantes fonctionnalités multi-appareils, prenant en charge plusieurs plateformes, notamment Windows, Mac, iOS et Android, avec une synchronisation des comptes entre les appareils : les utilisateurs peuvent directement visualiser et prendre le contrôle de l’écran de leur ordinateur depuis leur téléphone, et même déverrouiller et contrôler leur PC à distance lorsqu’il est verrouillé. Les tâches pouvant être effectuées sur l’ordinateur peuvent également l’être à distance via le téléphone, créant ainsi un ordinateur personnel que vous pouvez emporter partout avec vous. Contrairement à la plupart des produits qui se limitent à des « commandes à distance », Marvis offre un contrôle visuel en temps réel au niveau du bureau.