Runway dit que son dernier modèle vidéo d'IA peut en fait générer des scènes et des personnes cohérentes

Runway, une startup d'IA, vient d'annoncer que son dernier modèle de vidéo IA, Gen-4, peut maintenir la cohérence des scènes et des personnages à travers différents plans. C'est une avancée majeure car les vidéos générées par IA ont souvent du mal à maintenir une storyline fluide. Mais selon le post de Runway sur X, Gen-4 est conçu pour offrir aux utilisateurs plus de "continuité et de contrôle" lors de la création de leurs histoires.

Pour l'instant, Gen-4 est déployé pour les utilisateurs payants du service et les clients professionnels. Ce nouveau modèle permet de créer des personnages et des objets qui restent cohérents à travers différents plans, tout en partant d'une seule image de référence. Il suffit de décrire l'apparence souhaitée de la scène, et Gen-4 génère des sorties cohérentes sous différents angles.

Pour démontrer les capacités de Gen-4, Runway a publié une vidéo d'une femme qui apparaît identique dans différents plans, même lorsque l'éclairage change et que le contexte évolue.

Cette sortie intervient peu après leur générateur de vidéos Gen-3 Alpha, annoncé il y a moins d'un an. Gen-3 permettait de créer des vidéos plus longues, mais il a suscité une controverse car il aurait été entraîné sur de nombreuses vidéos YouTube et des films piratés récupérés sur Internet.