Meta heeft vandaag een nieuwe, door AI aangedreven videogeneratortool aangekondigd, Movie Gen genaamd, die high-definition video’s kan produceren. Movie Gen gebruikt tekstprompts om realistisch ogende videoclips te produceren met door AI gegenereerde audio. Momenteel kan Movie Gen AI-video’s maken van maximaal 16 seconden lang met 16 frames per seconde.
Meta heeft zijn AI-videogeneratortool “Movie Gen” aangekondigd, waarmee fantastische beelden kunnen worden gemaakt
Het bedrijf demonstreerde ook de mogelijkheden van Movie Gen door meerdere AI-videoclips te delen, waaronder een babynijlpaard dat rondzwemt in een rivier. Daarnaast zagen we een surfende koala en een vrouwelijke DJ een plaat draaien naast een Cheetah. Niet te vergeten: al deze AI-video’s kunnen in verschillende beeldverhoudingen worden gegenereerd.
Het is vermeldenswaard dat Movie Gen ook gepersonaliseerde video’s van foto’s kan maken. Meta demonstreert dit vermogen van Movie Gen met behulp van een afbeelding van een vrouw, en de tool genereerde later een video waarin ze in een pompoenveld zat te genieten van een soort drankje. Je kunt enkele screenshots bekijken die zijn vastgelegd in de onderstaande AI-video’s.
Meta vermeldde dat deze modellen zijn getraind op openbaar beschikbare en gelicentieerde videogegevens, hoewel de bron niet werd onthuld. Niet te vergeten: het is tegenwoordig een trend om auteursrechtelijk beschermde inhoud voor een groot bedrag in licentie te geven en Movie Gen is daar waarschijnlijk ook het resultaat van. Runway AI deed vorige maand iets soortgelijks, voor het geval je het nog niet wist.
Het bewerken van bestaande video en AI-gegenereerde audio is ook mogelijk
Laten we niet vergeten dat Movie Gen ook bestaande video’s kan bewerken. Het kan vloeiend overgangen, stijlen en andere dingen toevoegen die voorheen nooit in die specifieke video bestonden. Naast de mogelijkheden voor het genereren van video’s, kan Movie Gen ook hoogwaardige en hifi-audio van maximaal 45 seconden genereren.
Interessant is dat de gegenereerde audio omgevingsgeluid, geluidseffecten en instrumentale achtergrondmuziek bevat, die allemaal met de video worden gesynchroniseerd, waardoor aan het eind een volledige video-uitvoer ontstaat. Welnu, dat gebeurt allemaal met behulp van een video en optionele tekstprompts die door een gebruiker worden ingevoerd.
Het bedrijf voegt verder toe dat het aan deze AI-videogenerator heeft gewerkt in de overtuiging dat iedereen toegang zou moeten hebben tot dergelijke tools om zijn creativiteit te vergroten. Als je op zoek bent naar technische details achter Movie Gen, ga dan naar het 92 pagina’s tellende onderzoekspaper gedeeld door Meta. Bovendien bevindt Movie Gen zich nog in de testfase en is het niet beschikbaar voor openbaar gebruik, net als OpenAI’s Sora. We weten dus niet of en wanneer Meta het beschikbaar zal maken voor het grote publiek.
