Tekst-naar-video-model Gen-2 kan korte video's genereren met behulp van tekstprompts
In het kort
Het nieuwe Text2Video-model Gen-2 van RunWayML kan niet alleen bestaande bewerken videos maar genereer ook helemaal nieuwe, met alleen een tekstprompt.
Verwacht wordt dat deze functie de manier zal verbeteren waarop mensen inhoud creëren en delen op sociale-mediaplatforms, waardoor gebruikers kunnen transformeren statische beelden naar dynamisch en boeiende videoclips zonder enige voorkennis van videobewerking.
Het nieuwe tekst-naar-video-model Gen-2 van Runway kan niet alleen bestaande video's bewerken, maar ook helemaal nieuwe video's genereren met alleen een tekstprompt. Dit is een aanzienlijke verbetering ten opzichte van de vorige versie van Gen, die alleen bestaande video's kon bewerken. Het tekst-naar-videomodel Gen-2 maakt gebruik van Runway's geavanceerde AI-technologie om video's te maken die niet te onderscheiden zijn van video's die door mensen zijn gemaakt. Met deze nieuwe functie kunnen gebruikers tijd en moeite besparen door automatisch video's te genereren zonder dat ze uitgebreide videobewerkingsvaardigheden nodig hebben.
Het nieuwe Gen-2-model kan ook een geüploade afbeelding omzetten in een korte video klem. Dit wordt gedaan door een teksthint te geven die beschrijft wat de gebruiker wil dat de video is. Tot nu toe is de duur van de video's niet langer dan een paar seconden, maar de kwaliteit is al veel hoger dan die van concurrenten (vooral omdat concurrenten neurale netwerken zijn niet openbaar). Deze functie zal naar verwachting de manier verbeteren waarop mensen inhoud maken en delen op sociale mediaplatforms. Met het Gen-2-model kunnen gebruikers hun statische afbeeldingen eenvoudig omzetten in dynamische videoclips. De kans is groot dat Facebook of Tiktok deze technologie zullen gebruiken om de set AI-tools die beschikbaar zijn voor makers van inhoud uit te breiden.
de AI-videorace is wild. Er is nog maar een week verstreken sinds de lancering van Gen-1 en Gen-2 is al uit. De concurrentie tussen technologiebedrijven om de meest geavanceerde AI-videotechnologie te ontwikkelen neemt snel toe, waarbij elk bedrijf ernaar streeft het andere te overtreffen.
Om de nieuwe versie van Gen te proberen, moet u zich aanmelden in de wachtrij op de Runway-website.
- Runway, een startup op het gebied van kunstmatige intelligentie, kondigde Gen-1 aan, een neuraal netwerk dat oude video's in nieuwe kan veranderen door prompts en afbeeldingen te combineren. Gen-1 stelt filmmakers in staat om op een kosteneffectieve manier snel inhoud te produceren door de compositie en stijl van een beeld- of tekstprompt aan de structuur van de bronvideo. Runway Research legt zich toe op het bouwen van multimodale AI-systemen die nieuwe vormen van creativiteit mogelijk maken, en Gen-1 kan worden gebruikt om te experimenteren met de toekomst van verhalen vertellen.
- Vorige maand, Sam Altman, mede-oprichter en CEO van OpenAI, sprak onlangs met TechCrunch en zei dat OpenAI ontwikkelt zich een AI-model voor video's en GPT-4, die beschikbaar zal zijn voor het publiek nadat het bedrijf zijn betrouwbaarheid en veiligheid heeft bevestigd.
- In oktober ontwikkelde Google Imagen Video, een methode voor het maken van tekstvoorwaardelijke video's op basis van een reeks video's diffusiemodellen. Het systeem accepteert een tekstuele beschrijving en genereert een film van 16 frames met drie frames per seconde en een resolutie van 24 bij 48 pixels. Het systeem schaalt en “voorspelt” de extra frames, waardoor een uiteindelijke video ontstaat met 128 frames bij 24 frames per seconde en een resolutie van 720p (1280×768). Er werden zestig miljoen beeld-tekstparen en 14 miljoen video-tekstparen gebruikt om Imagen Video te trainen.
Lees meer gerelateerde artikelen:
Disclaimer
In lijn met de Richtlijnen voor vertrouwensprojectenHoud er rekening mee dat de informatie op deze pagina niet bedoeld is en niet mag worden geïnterpreteerd als juridisch, fiscaal, beleggings-, financieel of enige andere vorm van advies. Het is belangrijk om alleen te beleggen wat u zich kunt veroorloven te verliezen en onafhankelijk financieel advies in te winnen als u twijfels heeft. Voor meer informatie raden wij u aan de algemene voorwaarden en de hulp- en ondersteuningspagina's van de uitgever of adverteerder te raadplegen. MetaversePost streeft naar nauwkeurige, onpartijdige berichtgeving, maar de marktomstandigheden kunnen zonder voorafgaande kennisgeving worden gewijzigd.
Over de auteur
Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet.
Meer artikelen
Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet.
