Nieuwsverslag Technologie
22 maart 2023

Tekst-naar-video-model Gen-2 kan korte video's genereren met behulp van tekstprompts

In het kort

Het nieuwe Text2Video-model Gen-2 van RunWayML kan niet alleen bestaande bewerken videos maar genereer ook helemaal nieuwe, met alleen een tekstprompt.

Verwacht wordt dat deze functie de manier zal verbeteren waarop mensen inhoud creëren en delen op sociale-mediaplatforms, waardoor gebruikers kunnen transformeren statische beelden naar dynamisch en boeiende videoclips zonder enige voorkennis van videobewerking.

Het nieuwe tekst-naar-video-model Gen-2 van Runway kan niet alleen bestaande video's bewerken, maar ook helemaal nieuwe video's genereren met alleen een tekstprompt. Dit is een aanzienlijke verbetering ten opzichte van de vorige versie van Gen, die alleen bestaande video's kon bewerken. Het tekst-naar-videomodel Gen-2 maakt gebruik van Runway's geavanceerde AI-technologie om video's te maken die niet te onderscheiden zijn van video's die door mensen zijn gemaakt. Met deze nieuwe functie kunnen gebruikers tijd en moeite besparen door automatisch video's te genereren zonder dat ze uitgebreide videobewerkingsvaardigheden nodig hebben.

Tekst-naar-video-model Gen-2 kan korte video's genereren met behulp van tekstprompts

Het nieuwe Gen-2-model kan ook een geüploade afbeelding omzetten in een korte video klem. Dit wordt gedaan door een teksthint te geven die beschrijft wat de gebruiker wil dat de video is. Tot nu toe is de duur van de video's niet langer dan een paar seconden, maar de kwaliteit is al veel hoger dan die van concurrenten (vooral omdat concurrenten neurale netwerken zijn niet openbaar). Deze functie zal naar verwachting de manier verbeteren waarop mensen inhoud maken en delen op sociale mediaplatforms. Met het Gen-2-model kunnen gebruikers hun statische afbeeldingen eenvoudig omzetten in dynamische videoclips. De kans is groot dat Facebook of Tiktok deze technologie zullen gebruiken om de set AI-tools die beschikbaar zijn voor makers van inhoud uit te breiden.

de AI-videorace is wild. Er is nog maar een week verstreken sinds de lancering van Gen-1 en Gen-2 is al uit. De concurrentie tussen technologiebedrijven om de meest geavanceerde AI-videotechnologie te ontwikkelen neemt snel toe, waarbij elk bedrijf ernaar streeft het andere te overtreffen.

Om de nieuwe versie van Gen te proberen, moet u zich aanmelden in de wachtrij op de Runway-website.

  • Runway, een startup op het gebied van kunstmatige intelligentie, kondigde Gen-1 aan, een neuraal netwerk dat oude video's in nieuwe kan veranderen door prompts en afbeeldingen te combineren. Gen-1 stelt filmmakers in staat om op een kosteneffectieve manier snel inhoud te produceren door de compositie en stijl van een beeld- of tekstprompt aan de structuur van de bronvideo. Runway Research legt zich toe op het bouwen van multimodale AI-systemen die nieuwe vormen van creativiteit mogelijk maken, en Gen-1 kan worden gebruikt om te experimenteren met de toekomst van verhalen vertellen.
  • Vorige maand, Sam Altman, mede-oprichter en CEO van OpenAI, sprak onlangs met TechCrunch en zei dat OpenAI ontwikkelt zich een AI-model voor video's en GPT-4, die beschikbaar zal zijn voor het publiek nadat het bedrijf zijn betrouwbaarheid en veiligheid heeft bevestigd.
  • In oktober ontwikkelde Google Imagen Video, een methode voor het maken van tekstvoorwaardelijke video's op basis van een reeks video's diffusiemodellen. Het systeem accepteert een tekstuele beschrijving en genereert een film van 16 frames met drie frames per seconde en een resolutie van 24 bij 48 pixels. Het systeem schaalt en “voorspelt” de extra frames, waardoor een uiteindelijke video ontstaat met 128 frames bij 24 frames per seconde en een resolutie van 720p (1280×768). Er werden zestig miljoen beeld-tekstparen en 14 miljoen video-tekstparen gebruikt om Imagen Video te trainen.

Lees meer gerelateerde artikelen:

Disclaimer

In lijn met de Richtlijnen voor vertrouwensprojectenHoud er rekening mee dat de informatie op deze pagina niet bedoeld is en niet mag worden geïnterpreteerd als juridisch, fiscaal, beleggings-, financieel of enige andere vorm van advies. Het is belangrijk om alleen te beleggen wat u zich kunt veroorloven te verliezen en onafhankelijk financieel advies in te winnen als u twijfels heeft. Voor meer informatie raden wij u aan de algemene voorwaarden en de hulp- en ondersteuningspagina's van de uitgever of adverteerder te raadplegen. MetaversePost streeft naar nauwkeurige, onpartijdige berichtgeving, maar de marktomstandigheden kunnen zonder voorafgaande kennisgeving worden gewijzigd.

Over de auteur

Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet. 

Meer artikelen
Damir Jalalov
Damir Jalalov

Damir is de teamleider, productmanager en redacteur bij Metaverse Post, met onderwerpen als AI/ML, AGI, LLM's, Metaverse en Web3-gerelateerde velden. Zijn artikelen trekken maandelijks een enorm publiek van meer dan een miljoen gebruikers. Hij blijkt een expert te zijn met 10 jaar ervaring in SEO en digitale marketing. Damir is genoemd in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto en andere publicaties. Hij reist als digitale nomade tussen de VAE, Turkije, Rusland en het GOS. Damir behaalde een bachelordiploma in natuurkunde, wat hem volgens hem de kritische denkvaardigheden heeft gegeven die nodig zijn om succesvol te zijn in het steeds veranderende landschap van internet. 

Hot Stories
Schrijf je in op onze nieuwsbrief.
Laatste Nieuws

Van Ripple tot The Big Green DAO: hoe cryptocurrency-projecten bijdragen aan liefdadigheid

Laten we initiatieven onderzoeken die het potentieel van digitale valuta voor goede doelen benutten.

Meer weten

AlphaFold 3, Med-Gemini en anderen: de manier waarop AI de gezondheidszorg transformeert in 2024

AI manifesteert zich op verschillende manieren in de gezondheidszorg, van het blootleggen van nieuwe genetische correlaties tot het versterken van robotchirurgische systemen...

Meer weten
Sluit u aan bij onze innovatieve technologiegemeenschap
Lees meer
Lees meer
Crypto Exchange Jupiter introduceert Jupiter Swap V3, Dynamic Slippage, naast andere belangrijke updates in de komende weken
markten Nieuwsverslag Technologie
Crypto Exchange Jupiter introduceert Jupiter Swap V3, Dynamic Slippage, naast andere belangrijke updates in de komende weken
14 June 2024
Polygon introduceert zijn governance-hub, die een uniforme, transparante interface biedt voor gemeenschapsbestuur
Nieuwsverslag Technologie
Polygon introduceert zijn governance-hub, die een uniforme, transparante interface biedt voor gemeenschapsbestuur 
14 June 2024
Binance registreert meer dan 30 miljoen nieuwe gebruikers in 2024, klantenactiva overschrijden de mijlpaal van $100 miljard
markten Nieuwsverslag Technologie
Binance registreert meer dan 30 miljoen nieuwe gebruikers in 2024, klantenactiva overschrijden de mijlpaal van $100 miljard
14 June 2024
Amazon ondersteunt generatieve AI-startups met een investering van $230 miljoen en wijst $80 miljoen toe aan zijn tweede AWS Generative AI Accelerator-programma
Business Nieuwsverslag Technologie
Amazon ondersteunt generatieve AI-startups met een investering van $230 miljoen en wijst $80 miljoen toe aan zijn tweede AWS Generative AI Accelerator-programma
14 June 2024