Meta’s Movie Gen : une technologie d’IA pour créer des vidéos et du son à partir de texte, mais l’accessibilité reste limitée

Informations clés

• Meta a introduit un modèle d’IA révolutionnaire appelé Movie Gen, qui produit des vidéos à partir d’invites de texte, faisant écho à des capacités similaires attendues du prochain Sora d’OpenAI.
• En plus de la création vidéo, les fonctions de Movie Gen incluent la transformation de photographies en contenu vidéo, l’application de modifications textuelles aux clips et la génération d’audio pour accompagner les vidéos.
• Movie Gen est actuellement en développement, sans calendrier spécifique pour son lancement public encore annoncé.

Movie Gen de Meta représente une avancée impressionnante dans la technologie de l’intelligence artificielle. En saisissant simplement du texte, les utilisateurs peuvent créer de courts clips vidéo, modifier des clips existants, convertir des images en vidéos et même générer du son, ce qui constitue une suite complète pour les créateurs de contenu.

Tout comme d’autres systèmes de conversion de texte en vidéo émergents, tels que Sora d’OpenAI, Movie Gen n’est pas encore disponible à l’utilisation , toutes les démonstrations actuelles portant sur des capacités futures. Le concept fondamental reste le même : saisir du texte pour produire des vidéos haute définition époustouflantes.

De plus, les utilisateurs auront la possibilité de générer des vidéos dans différents rapports hauteur/largeur.

Un autre aspect notable de Movie Gen est sa fonctionnalité de montage vidéo , permettant aux utilisateurs de télécharger des séquences et de les manipuler à l’aide d’invites pour effectuer des modifications personnalisées, appliquer des styles, des transitions et améliorer les clips avec des fonctionnalités pilotées par l’IA.

Une caractéristique particulièrement impressionnante de Movie Gen est sa capacité à créer des « vidéos personnalisées », qui utilisent des photographies pour générer des vidéos tout en préservant méticuleusement les identités et expressions individuelles.

Le modèle est également capable de produire de l’audio pour des vidéos, qu’elles soient issues ou non d’invites textuelles, pour des durées allant jusqu’à 45 secondes. Cet audio peut comprendre des effets sonores, de la musique instrumentale et des sons ambiants, le tout synchronisé avec la lecture vidéo. Une approche d’extension audio est utilisée pour assurer une cohésion transparente entre les composants audio et vidéo.

Meta affirme que le modèle « a le potentiel d’améliorer la créativité », même s’il reconnaît qu’il n’est pas « prêt à être lancé dans un avenir proche : il reste coûteux et lent à générer. Cependant, nous souhaitons partager nos progrès car les résultats sont tout à fait remarquables ». Alors que la technologie de génération de vidéos par IA est encore en évolution, Movie Gen positionne Meta dans l’arène concurrentielle aux côtés d’OpenAI et de Google, qui explorent tous deux leurs propres modèles de conversion de texte en vidéo.

L’avancée rapide de la génération de vidéos par l’IA suscite des inquiétudes quant à d’éventuelles utilisations abusives, comme cela a été observé avec les images générées par l’IA, ce qui soulève des risques de mettre en péril la carrière de cinéastes et d’artistes vidéo. L’arrivée sur le marché de films entièrement générés par l’IA n’est peut-être pas loin. Néanmoins, cette technologie est encore en cours de développement, Meta n’offrant aucune date de sortie prévue, même si une sortie avant la fin de l’année prochaine semble peu probable.

Source