Exclusivité : Luma AI lance des agents créatifs alimentés par des modèles d'« intelligence unifiée »

Jeudi, la start-up spécialisée dans la génération de vidéos par IA Luma a présenté Luma Agents, un système conçu pour gérer l'ensemble des workflows créatifs, qu'il s'agisse de texte, d'images, de vidéo ou d'audio. Ces agents sont pilotés par la famille de modèles Unified Intelligence de Luma, qui se caractérise par une architecture entraînée comme un moteur de raisonnement multimodal unique.

Luma positionne ses agents comme un outil transformateur pour les agences de publicité, les services marketing, les studios de design et les entreprises. Selon Luma, les agents peuvent planifier et produire du texte, des images, des vidéos et de l'audio, tout en coordonnant leur travail avec d'autres modèles d'IA tels que Ray 3.14 de Luma, Veo 3 de Google, Nano Banana Pro, Seedream de ByteDance et les modèles vocaux d'ElevenLabs.

Les agents de Luma reposent sur le modèle Uni-1 de la société, le premier membre de sa série de modèles d'IA Unified Intelligence. Amit Jain, PDG et cofondateur de Luma, a expliqué que Uni-1 a été formé à l'audio, à la vidéo, à l'imagerie, au langage et au raisonnement spatial.

M. Jain a déclaré à TechCrunch que le modèle Uni-1 peut « penser en utilisant le langage et visualiser et rendre en pixels ou en images... nous appelons cela « l'intelligence en pixels ». Il a ajouté que d'autres formats de sortie, tels que l'audio et la vidéo, seront introduits dans les futures versions du modèle.

« Nos clients n'achètent pas seulement un outil, ils réinventent l'ensemble de leur processus commercial », a déclaré M. Jain.

Crédits image : Luma AI

Luma a déjà commencé à déployer sa nouvelle plateforme agentique auprès de ses clients actuels, parmi lesquels figurent les agences de publicité mondiales Publicis Groupe et Serviceplan, ainsi que des marques telles qu'Adidas, Mazda et la société saoudienne d'IA Humain.

M. Jain a souligné que les agents Luma constituent une avancée majeure, car ils préservent le contexte continu entre les actifs, les membres de l'équipe et les révisions créatives. Il a ajouté que les agents peuvent évaluer et améliorer leurs résultats, en les affinant grâce à une auto-évaluation répétée.

Selon M. Jain, c'est cette capacité d'autocontrôle qui rend les agents de codage si efficaces. « Vous avez besoin de cette capacité pour revoir votre travail, le corriger et répéter le cycle jusqu'à ce que le résultat réponde aux normes de qualité et de précision. »

M. Jain a observé que l'approche actuelle de l'utilisation des outils d'IA dans les environnements créatifs ne permet pas d'obtenir les gains de productivité escomptés par le secteur. Au contraire, on a souvent l'impression que « voici 100 modèles, maintenant apprenez à utiliser chacun d'entre eux ».

Il explique que les agents Luma se distinguent parce que les utilisateurs ne sont pas tenus de demander à plusieurs reprises chaque itération d'une image ou d'un concept. Au lieu de cela, le système génère de nombreuses variations et permet aux utilisateurs de guider la direction créative par le biais d'entrées conversationnelles.

« Grâce à l'intelligence unifiée, nos modèles ne se contentent pas de générer, ils comprennent également, ce qui nous permet de construire un système capable de gérer des tâches complètes de bout en bout », a déclaré M. Jain.

Il a fait une comparaison avec un architecte humain qui conçoit un bâtiment. Lorsque l'architecte dessine, il se représente mentalement la structure, l'éclairage, les relations spatiales et l'expérience du monde réel. M. Jain a expliqué que l'intelligence unifiée fonctionne selon un principe similaire.

Selon M. Jain, le système peut accélérer considérablement les processus créatifs. Dans une démonstration, il a illustré comment un brief de 200 mots et une image de produit (un rouge à lèvres) ont permis au système de produire plusieurs concepts pour les paramètres, les modèles et les palettes de couleurs d'une campagne publicitaire.

Dans un autre cas, Luma Agents a converti la campagne publicitaire d'une marque, d'une durée d'un an et d'un coût de 15 millions de dollars, en plusieurs publicités localisées pour différents pays, accomplissant cette tâche en 40 heures pour moins de 20 000 dollars, tout en respectant les normes internes de qualité et de précision de la marque.

Bien que Luma Agents soit désormais accessible via une API publique, M. Jain a indiqué que la start-up avait l'intention de mettre en place un accès progressif afin de garantir un service fiable et d'éviter toute interruption du flux de travail.