Meta’s Movie Gen: AI-technologie voor het maken van video en geluid uit tekst, maar de toegankelijkheid blijft beperkt

Belangrijkste inzichten

• Meta heeft een baanbrekend AI-model geïntroduceerd met de naam Movie Gen, dat video’s produceert op basis van tekstberichten. Dit model biedt vergelijkbare mogelijkheden als de aankomende Sora van OpenAI.
• Naast het maken van video’s omvat Movie Gen ook de functies om foto’s om te zetten in videocontent, tekstbewerkingen toe te passen op clips en audio te genereren ter begeleiding van video’s.
• Movie Gen is momenteel in ontwikkeling; er is nog geen specifieke tijdlijn voor de publieke lancering aangekondigd.

Meta’s Movie Gen toont een indrukwekkende sprong in AI-technologie. Door simpelweg tekst in te voeren, kunnen gebruikers korte videoclips maken, bestaande clips aanpassen, afbeeldingen omzetten in video’s en zelfs geluid genereren – in feite een uitgebreide suite voor contentmakers.

Net als andere opkomende tekst-naar-videosystemen, zoals Sora van OpenAI, is Movie Gen nog niet beschikbaar voor gebruik , met alle huidige demonstraties die betrekking hebben op toekomstige mogelijkheden. Het fundamentele concept blijft consistent: voer tekst in om verbluffende, high-definition video’s te produceren.

Bovendien hebben gebruikers de mogelijkheid om video’s in verschillende beeldverhoudingen te genereren.

Een ander opvallend aspect van Movie Gen is de videobewerkingsfunctie , waarmee gebruikers beeldmateriaal kunnen uploaden en bewerken met behulp van prompts om op maat gemaakte bewerkingen uit te voeren, stijlen en overgangen toe te passen en clips te verbeteren met AI-gestuurde functies.

Een bijzonder indrukwekkende functie van Movie Gen is de mogelijkheid om ‘ gepersonaliseerde video’s ‘ te maken. Hierbij worden foto’s gebruikt om video’s te genereren, waarbij de individuele identiteit en expressie nauwkeurig behouden blijven.

Het model heeft ook de capaciteit om audio te produceren voor video’s, ongeacht of deze afkomstig zijn van tekstprompts of niet, voor een duur van maximaal 45 seconden. Deze audio kan geluidseffecten, instrumentale muziek en omgevingsgeluiden omvatten, allemaal gesynchroniseerd met de videoweergave. Er wordt gebruikgemaakt van een audio-extensiebenadering om naadloze samenhang tussen de audio- en videocomponenten te garanderen.

Meta beweert dat het model “de potentie heeft om creativiteit te verbeteren”, hoewel het erkent dat het niet “op korte termijn klaar is voor productlancering – het blijft kostbaar en traag om te genereren. We willen echter onze voortgang delen, aangezien de resultaten behoorlijk opmerkelijk zijn.” Hoewel AI-videogeneratietechnologie nog steeds evolueert, positioneert Movie Gen Meta in de competitieve arena naast OpenAI en Google, die beide hun eigen tekst-naar-videomodellen onderzoeken.

De snelle vooruitgang van AI-videogeneratie roept zorgen op over mogelijk misbruik, zoals is waargenomen bij door AI gegenereerde afbeeldingen, waardoor de kans toeneemt dat de carrières van filmmakers en videokunstenaars in gevaar komen. De komst van volledig door AI gegenereerde films op de markt is misschien niet ver weg. Niettemin is deze technologie nog in ontwikkeling, waarbij Meta geen verwachte releasedatums biedt, hoewel een debuut vóór eind volgend jaar onwaarschijnlijk lijkt.

Bron