Meta a annoncé aujourd'hui un nouvel outil de génération vidéo basé sur l'IA appelé Movie Gen, capable de produire des vidéos haute définition. Movie Gen utilise des invites textuelles pour produire des clips vidéo réalistes avec un son généré par l'IA. Actuellement, Movie Gen peut créer des vidéos IA d'une durée maximale de 16 secondes à 16 images par seconde.

Meta a annoncé son outil de génération de vidéo AI « Movie Gen » qui peut créer des séquences étonnantes

La société a également présenté les capacités de Movie Gen en partageant plusieurs clips vidéo d'IA, notamment un bébé hippopotame nageant dans une rivière. En plus, nous avons vu un koala surfeur et une DJ qui tournait un disque aux côtés d'un guépard. N’oubliez pas que toutes ces vidéos IA peuvent être générées dans différents formats d’image.

Il convient de mentionner que Movie Gen peut également créer des vidéos personnalisées à partir de photos. Meta présente cette capacité de Movie Gen en utilisant l'image d'une femme, et l'outil a ensuite généré une vidéo la représentant assise dans un champ de citrouilles en train de boire une sorte de boisson. Vous pouvez consulter quelques captures d’écran capturées à partir des vidéos AI ci-dessous.

Meta a mentionné que ces modèles sont formés sur des données vidéo accessibles au public et sous licence, sans toutefois en révéler la source. Il ne faut pas oublier qu'il y a une tendance à accorder des licences à des contenus protégés par le droit d'auteur pour une grosse somme ces jours-ci et Movie Gen en est probablement aussi le résultat. Runway AI a fait quelque chose de similaire le mois dernier, juste au cas où vous ne le sauriez pas.

L'édition de vidéos existantes et de l'audio généré par l'IA est également possible

N'oublions pas que Movie Gen peut également éditer des vidéos existantes. Il peut ajouter en douceur des transitions, des styles et d'autres éléments qui n'existaient jamais auparavant sur cette vidéo spécifique. Outre les capacités de génération vidéo, Movie Gen peut également générer un son de haute qualité et haute fidélité jusqu'à 45 secondes.

Il est intéressant de noter que l'audio généré présente un son ambiant, des effets sonores et une musique de fond instrumentale qui sont tous synchronisés avec la vidéo, donnant ainsi une sortie vidéo complète à la fin. Eh bien, tout cela fait cela en utilisant une vidéo et des invites de texte facultatives saisies par un utilisateur.

La société ajoute en outre qu'elle a travaillé sur ce générateur de vidéo IA avec la conviction que chacun devrait avoir accès à de tels outils pour améliorer sa créativité. Si vous recherchez des détails techniques derrière Movie Gen, rendez-vous sur le document de recherche de 92 pages partagé par Meta. De plus, Movie Gen est encore en phase de test et n'est pas disponible pour un usage public, tout comme Sora d'OpenAI. Nous ne savons donc pas si ou quand Meta le rendra accessible au grand public.

A lire également