El model de text a vídeo Gen-2 pot generar vídeos curts mitjançant indicacions de text
En breu
El nou model Text2Video Gen-2 de RunWayML no només pot editar els existents Vídeos però també en generen de nous des de zero, utilitzant només un missatge de text.
S'espera que aquesta funció millori la manera com les persones creen i comparteixen contingut a les plataformes de xarxes socials, permetent als usuaris transformar-se imatges estàtiques en dinàmiques i capturar videoclips sense cap coneixement previ d'edició de vídeo.
El nou model de text a vídeo Gen-2 de Runway no només pot editar vídeos existents, sinó que també pot generar-ne de nous des de zero, utilitzant només un missatge de text. Aquesta és una millora significativa respecte a la versió anterior de Gen, que només podia editar vídeos existents. El model de text a vídeo Gen-2 utilitza la tecnologia d'IA d'avantguarda de Runway per crear vídeos que no es distingeixen dels fets per humans. Amb aquesta nova funció, els usuaris poden estalviar temps i esforços generant vídeos automàticament sense necessitat d'ampliar habilitats d'edició de vídeo.
El nou model Gen-2 també és capaç de convertir una imatge carregada en un vídeo curt clip. Això es fa proporcionant una pista de text que descriu com vol que l'usuari sigui el vídeo. Fins ara, la durada dels vídeos no supera els pocs segons, però la qualitat ja és molt superior a la dels competidors (sobretot perquè els competidors xarxes neuronals no estan disponibles públicament). S'espera que aquesta funció millori la manera com la gent crea i comparteix contingut a les plataformes de xarxes socials. Amb el model Gen-2, els usuaris poden transformar fàcilment les seves imatges estàtiques en clips de vídeo dinàmics. Hi ha moltes possibilitats que Facebook o Tiktok utilitzin aquesta tecnologia per ampliar el conjunt d'eines d'IA disponibles per als creadors de contingut.
la cursa de vídeo amb IA és salvatge. Només ha passat una setmana des del llançament de Gen-1, i Gen-2 ja està disponible. La competència entre les empreses tecnològiques per desenvolupar la tecnologia de vídeo d'IA més avançada està augmentant ràpidament, i cada empresa s'esforça per superar l'altra.
Per provar la nova versió de Gen, us haureu de registrar a la cua del Lloc web de la pista.
- Runway, una startup d'intel·ligència artificial, va anunciar Gen-1, una xarxa neuronal que pot convertir vídeos antics en nous combinant indicacions i imatges. Gen-1 permet als cineastes produir contingut ràpidament d'una manera rendible aplicant la composició i l'estil d'un missatge d'imatge o text a l'estructura del vídeo font. Runway Research es dedica a construir sistemes d'IA multimodals que permetin noves formes de creativitat, i Gen-1 es pot utilitzar per experimentar amb el futur de la narració.
- El mes passat, Sam Altman, cofundador i CEO de OpenAI, va parlar recentment amb TechCrunch i ho va dir OpenAI està desenvolupant un Model d'IA per a vídeos i GPT-4, que estarà a disposició del públic després que l'empresa confirmi la seva fiabilitat i seguretat.
- A l'octubre, Google va desenvolupar Imagen Video, un mètode per crear vídeos condicionats amb text basat en una sèrie de vídeos models de difusió. El sistema accepta una descripció textual i genera una pel·lícula de 16 fotogrames a tres fotogrames per segon amb una resolució de 24 per 48 píxels. El sistema escala i "prediu" els fotogrames addicionals, creant un vídeo final amb 128 fotogrames a 24 fotogrames per segon i una resolució de 720p (1280 × 768). Seixanta milions de parells imatge-text i 14 milions de parells de vídeo-text es van utilitzar per entrenar Imagen Video.
Llegeix més articles relacionats:
renúncia
En línia amb la Directrius del projecte Trust, si us plau, tingueu en compte que la informació proporcionada en aquesta pàgina no pretén ni s'ha d'interpretar com a assessorament legal, fiscal, d'inversió, financer o de cap altra forma. És important invertir només el que et pots permetre perdre i buscar assessorament financer independent si tens dubtes. Per obtenir més informació, us suggerim que feu referència als termes i condicions, així com a les pàgines d'ajuda i assistència proporcionades per l'emissor o l'anunciant. MetaversePost es compromet a fer informes precisos i imparcials, però les condicions del mercat estan subjectes a canvis sense previ avís.
About The Autor
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
més articles
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
