Memories AI développe une couche de mémoire visuelle pour les appareils portables et la robotique

Shawn Shen estime que pour que l'IA s'épanouisse véritablement dans le monde physique, elle doit être capable de se souvenir de ce qu'elle voit. Son entreprise, Memories.ai, s'appuie sur les outils d'IA de Nvidia pour créer l'infrastructure sous-jacente qui permettra aux appareils portables et aux robots de stocker et de récupérer des souvenirs visuels.

Lundi, lors de la conférence Nvidia GTC, Memories.ai a annoncé un partenariat avec le leader des semi-conducteurs. Cette collaboration permet à Memories.ai d'accéder à Cosmos-Reason 2 de Nvidia — un modèle de langage de vision raisonnée — et à Nvidia Metropolis, une application de recherche et de synthèse vidéo, afin de faire progresser sa technologie de mémoire visuelle.

Shen (photo de gauche) a expliqué à TechCrunch que l'idée de l'entreprise a germé alors que lui et son cofondateur et directeur technique, Ben Zhou (photo de droite), développaient le système d'IA pour les lunettes Ray-Ban de Meta. Leur travail a mis en évidence une question fondamentale : quelle utilité pratique une telle technologie aurait-elle si les utilisateurs ne pouvaient pas accéder ultérieurement aux données vidéo qu'ils ont capturées ni s'en souvenir ?

Après avoir cherché en vain des solutions existantes pour la mémoire visuelle IA, ils ont pris la décision de quitter Meta et de développer eux-mêmes cette technologie.

« L'IA a déjà remporté un succès remarquable dans le domaine numérique. La prochaine frontière est le monde physique », a déclaré Shen. « Les appareils portables et les robots alimentés par l'IA ont également besoin de mémoire... En fin de compte, nous pensons qu'un avenir où l'IA dispose d'une mémoire visuelle est inévitable. »

Le concept de mémoire pour les systèmes d’IA est un développement relativement récent. OpenAI a introduit des fonctionnalités de mémoire pour ChatGPT en 2024, avec des améliorations en 2025. De même, xAI d’Elon Musk et Google Gemini ont lancé leurs propres outils de mémoire au cours des deux dernières années.

Cependant, Shen note que ces avancées se sont principalement concentrées sur la mémoire textuelle. Si le texte est plus structuré et plus facile à indexer, il est moins adapté à l’IA physique — comme la robotique et les appareils portables — qui perçoit et interagit principalement avec le monde par le biais d’informations visuelles.

Fondée en 2024, Memories.ai a levé 16 millions de dollars à ce jour. Ce montant comprend un tour de table initial de 8 millions de dollars en juillet 2025, suivi d'une extension de 8 millions de dollars. L'investissement a été mené par Susa Ventures, avec la participation de Seedcamp, Fusion Fund, Crane Venture Partners et d'autres.

Selon Shen, la mise en place de cette couche de mémoire visuelle a posé deux défis majeurs : développer l'infrastructure nécessaire pour intégrer et indexer la vidéo dans un format de données stockable et récupérable, et collecter les données d'entraînement requises.

La société a lancé son modèle de mémoire visuelle à grande échelle (LVMM) en juillet 2025. M. Shen le décrit comme une version plus compacte du Gemini Embedding 2 récemment publié par Google, un modèle d'indexation et de recherche multimodal.

Pour la collecte de données, l'équipe a créé LUCI, un dispositif matériel sur mesure porté par des « collecteurs de données » afin d'enregistrer des vidéos d'entraînement. Shen a précisé qu'ils n'avaient pas l'intention de devenir un fabricant de matériel ni de vendre ces appareils. Ils ont conçu LUCI car les enregistreurs vidéo commerciaux, souvent axés sur des formats haute définition qui épuisent la batterie, ne répondaient pas à leurs besoins.

Memories.ai a depuis lancé la deuxième génération de son LVMM et conclu un partenariat avec Qualcomm. Le modèle devrait fonctionner sur les processeurs de Qualcomm à partir de la fin de cette année.

Shen a révélé que la société collaborait déjà avec plusieurs grands fabricants d’appareils portables, bien qu’il ait refusé de les nommer. Bien qu’il existe une demande actuelle, il prévoit des opportunités encore plus importantes à l’avenir sur les marchés des appareils portables et de la robotique.

« D'un point de vue commercial, nous nous concentrons pleinement sur le modèle et l'infrastructure », a déclaré M. Shen. « Nous pensons que le marché des appareils portables et de la robotique verra inévitablement le jour, mais son émergence complète se profile encore à l'horizon. »