Gen-1: AI generira nove videozapise iz postojećih kombiniranjem upita i slika
Ukratko
Gen-1 je neuronska mreža koja može generirati nove videozapise iz postojećih kombiniranjem upute i slike.
Također se može koristiti za stvaranje potpuno novih videozapisa od nule.
Mogućnost generiranja novih videozapisa iz postojećih ima brojne potencijalne primjene.
RunWayML, startup za umjetnu inteligenciju, najavio novi proizvod pod nazivom Gen-1, neuronska mreža koja može generirati nove videozapise iz postojećih kombiniranjem upita i slika. Godinama su neuronske mreže bile ograničene na zadatak prijenosa stila, što je proces snimanja slike i primjene stila druge slike na nju. Ovako dobivamo one trippy video zapise prijenosa u stilu dubokog učenja gdje je, na primjer, krajolik prikazan u stilu Van Goghove Zvjezdane noći.
Sada, s Gen-1, neuronske mreže mogu učiniti više od samog prijenosa stilova. Može generirati nove videozapise od nule, koristeći upute i slike kao ulaz. To otvara cijeli niz novih mogućnosti za Videozapisi stvoreni umjetnom inteligencijom. Trenutačno su videozapisi koje generira Gen-1 kratki i jednostavni. Ali kako se tehnologija razvija, možemo očekivati sve složenije i složenije realistične videozapise koje generira AI.
| Preporučeni post: Reproduktivno zdravlje muškaraca poboljšava se gledanjem videa za odrasle u virtualnoj stvarnosti |
Što je Gen-1?
Snažni alati za stvaranje i uređivanje slika otključani su tekstualnim navođenjem modeli generativne difuzije. Dok su oni primijenjeni na stvaranje videa, sadašnje metode za uređivanje sadržaja već postojećeg materijala uz zadržavanje njegove strukture zahtijevaju skupu ponovnu obuku za svaki unos ili ovise o rizičnom širenju izmjena slike između okvira.
Programeri opisuju model za video difuziju vođenu strukturom i sadržajem, koja mijenja filmove na temelju pisanih ili vizualnih opisa željenog rezultata. Zbog nedovoljnog odvajanja, dolazi do sukoba između korisničkih izmjena sadržaja i prikaza strukture. Oni pokazuju da se struktura i cjelovitost sadržaja mogu kontrolirati uvježbavanjem monokularnih procjena dubine s različitim razinama detalja.
Sintetizirajte nove videozapise na realističan i dosljedan način primjenom kompozicije i stila slike ili tekstualnog upita na strukturu vašeg izvornog videozapisa. To je kao da snimate nešto novo, a da zapravo ništa ne snimite.
Prijenos stila slike ili upita na svaki okvir videozapisa može biti izvrstan način da ujedinite svoj projekt, date mu sveobuhvatnu vizualnu temu i stvorite dosljednost.
Upotrebom softvera i kreativnog dizajna, makete se mogu transformirati u estetski ugodne i interaktivne prikaze koji oživljavaju viziju korisnika.
Uz značajke za uređivanje videozapisa, lako je izdvojiti dijelove videozapisa i poboljšati ih tekstualnim uputama.
Primjenom ulazne slike ili brz na rendere bez teksture može znatno poboljšati njihov realizam, oživljavajući 3D modele.
Runway Research posvećen je izgradnji multimodalnih AI sustava koji omogućuju nove oblike kreativnosti. Gen-1 predstavlja još jedan od naših ključnih koraka naprijed u ovoj misiji. Ako ste kreativac koji želi eksperimentirati s budućnošću pripovijedanja, zatražite pristup u nastavku.
Gen-1 se također može koristiti za stvaranje potpuno novih videozapisa od nule. Može se koristiti u brojne svrhe, uključujući stvaranje novih verzija postojećih filmova ili stvaranje potpuno novih filmova. Ova će vijest zasigurno uzbuditi filmaše i druge kreativce koji uvijek traže nove načine za pomicanje granica svoje umjetnosti. S Gen-1 sada imaju novi moćni alat na raspolaganju.
Mogućnost da generirati nove videozapise od postojećih ima brojne potencijalne primjene. Na primjer, mogao bi se koristiti za stvaranje novih verzija postojećeg videosadržaja, tako da bi se mogao koristiti za stvaranje alternativnih verzija scena ili snimaka koji bi mogli biti preskupi ili logistički teški za snimanje.
Možete se prijaviti za korištenje modela dok je u beta testiranju ovdje.
Pročitajte više o AI:
Izjava o odricanju od odgovornosti
U skladu s Smjernice projekta povjerenja, imajte na umu da informacije navedene na ovoj stranici nemaju namjeru i ne smiju se tumačiti kao pravni, porezni, investicijski, financijski ili bilo koji drugi oblik savjeta. Važno je ulagati samo ono što si možete priuštiti izgubiti i potražiti neovisni financijski savjet ako imate bilo kakvih nedoumica. Za dodatne informacije predlažemo da pogledate odredbe i uvjete, kao i stranice za pomoć i podršku koje pruža izdavatelj ili oglašivač. MetaversePost je predan točnom, nepristranom izvješćivanju, ali tržišni uvjeti podložni su promjenama bez prethodne najave.
O autoru
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
Više članaka
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
