Gen-1: AI luo uusia videoita olemassa olevista yhdistämällä kehotteita ja kuvia
Lyhyesti
Gen-1 on hermoverkko, joka voi luoda uusia videoita olemassa olevista yhdistämällä kehotteita ja kuvia.
Sitä voitaisiin käyttää myös täysin uusien videoiden luomiseen tyhjästä.
Mahdollisuudella luoda uusia videoita olemassa olevista videoista on useita potentiaalisia sovelluksia.
RunWayML, tekoälyn startup, on ilmoittanut uusi tuote nimeltä Gen-1, hermoverkko, joka voi luoda uusia videoita olemassa olevista yhdistämällä kehotteita ja kuvia. Vuosien ajan hermoverkot ovat rajoittuneet tyylinsiirtoon, joka on prosessi, jossa otetaan kuva ja sovelletaan siihen toisen kuvan tyyliä. Näin saamme ne trippyt syväoppivat tyylisiirtovideot, joissa esimerkiksi maisema renderöidään Van Goghin Starry Night -tyyliin.
Nyt Gen-1:n avulla hermoverkot voivat tehdä muutakin kuin vain tyylinsiirron. Se voi luoda uusia videoita tyhjästä käyttämällä kehotteita ja kuvia syötteenä. Tämä avaa täysin uusia mahdollisuuksia Tekoälyn luomia videoita. Tällä hetkellä Gen-1:n luomat videot ovat lyhyitä ja yksinkertaisia. Mutta kun tekniikka kehittyy, voimme odottaa näkevämme monimutkaisempia ja tekoälyn luomia realistisia videoita.
| Suositeltu postaus: Miesten lisääntymisterveyttä parannetaan katsomalla aikuisten videoita virtuaalitodellisuudessa |
Mikä on Gen-1?
Voimakkaat kuvien luonti- ja muokkaustyökalut avautuvat tekstiohjattuina generatiiviset diffuusiomallit. Vaikka näitä on sovellettu videoiden luomiseen, nykyiset menetelmät jo olemassa olevan materiaalin sisällön editoimiseksi sen rakenteen säilyttämiseksi vaativat kallista uudelleenkoulutusta jokaiselle syötteelle tai riippuvat riskialtis kuvan muutosten leviämisestä kehysten välillä.
Kehittäjät kuvaavat rakenne- ja sisältöohjatun videon diffuusion mallin, joka muuttaa elokuvia joko kirjallisen tai visuaalisen kuvauksen perusteella halutusta tuloksesta. Riittämättömän kytkennän vuoksi syntyy ristiriitoja käyttäjien toimittamien sisältömuutosten ja rakenneesitysten välillä. Ne osoittavat, että rakennetta ja sisällön eheyttä voidaan hallita harjoittelemalla monokulaarisia syvyysarvioita eri yksityiskohtaisilla tasoilla.
Syntetisoi uusia videoita realistisella ja johdonmukaisella tavalla soveltamalla kuvan tai tekstikehotteen koostumusta ja tyyliä lähdevideosi rakenteeseen. Se on kuin kuvaisi jotain uutta kuvaamatta oikeastaan mitään.
Kuvan tai kehotteen tyylin siirtäminen jokaiseen videon ruutuun voi olla loistava tapa yhtenäistää projektia, antaa sille kattava visuaalinen teema ja luoda johdonmukaisuutta.
Ohjelmistojen ja luovan suunnittelun avulla mallit voidaan muuntaa esteettisesti miellyttäviksi ja interaktiivisiksi renderöiksi, jotka herättävät käyttäjän näkemyksen henkiin.
Videon muokkausominaisuuksien avulla on helppo eristää videon osia ja parantaa niitä tekstikehotteilla.
Syötekuvan käyttäminen tai nopea teksturoimattomiin renderöityihin voi parantaa huomattavasti niiden realistisuutta ja herättää 3D-mallit eloon.
Runway Research on omistautunut rakentamaan multimodaalisia tekoälyjärjestelmiä, jotka mahdollistavat uusia luovuuden muotoja. Gen-1 on jälleen yksi keskeisistä askeleistamme eteenpäin tässä tehtävässä. Jos olet luova ja haluat kokeilla tarinankerronnan tulevaisuutta, pyydä käyttöoikeutta alla.
Gen-1:tä voidaan käyttää myös täysin uusien videoiden luomiseen tyhjästä. Sitä voidaan käyttää useisiin tarkoituksiin, kuten uusien versioiden luomiseen olemassa olevista elokuvista tai uusien elokuvien luomiseen kokonaan. Tämä uutinen innostaa varmasti elokuvantekijöitä ja muita luovia henkilöitä, jotka etsivät jatkuvasti uusia tapoja työntää taiteensa rajoja. Gen-1:n myötä heillä on nyt käytössään uusi tehokas työkalu.
Kyky luoda uusia videoita olemassa olevista on useita potentiaalisia sovelluksia. Sitä voitaisiin käyttää esimerkiksi uusien versioiden luomiseen olemassa olevasta videosisällöstä, joten sitä voitaisiin käyttää vaihtoehtoisten versioiden luomiseen kohtauksista tai otoksista, jotka voivat olla liian kalliita tai logistisesti vaikeita kuvata.
Voit hakea mallin käyttöä, kun se on betatestauksessa tätä.
Lue lisää tekoälystä:
Vastuun kieltäminen
Mukaisesti Luottamusprojektin ohjeetHuomaa, että tällä sivulla annettuja tietoja ei ole tarkoitettu eikä niitä tule tulkita oikeudellisiksi, verotukselliseksi, sijoitus-, rahoitus- tai minkään muun muodon neuvoiksi. On tärkeää sijoittaa vain sen verran, mitä sinulla on varaa menettää, ja pyytää riippumatonta talousneuvontaa, jos sinulla on epäilyksiä. Lisätietoja saat käyttöehdoista sekä myöntäjän tai mainostajan tarjoamista ohje- ja tukisivuista. MetaversePost on sitoutunut tarkkaan, puolueettomaan raportointiin, mutta markkinaolosuhteet voivat muuttua ilman erillistä ilmoitusta.
Author
Damir on tiimin johtaja, tuotepäällikkö ja toimittaja osoitteessa Metaverse Post, kattaa aiheita, kuten AI/ML, AGI, LLMs, Metaverse ja Web3- liittyvät kentät. Hänen artikkelinsa houkuttelevat yli miljoonan käyttäjän massiivisen yleisön joka kuukausi. Hän näyttää olevan asiantuntija, jolla on 10 vuoden kokemus hakukoneoptimoinnista ja digitaalisesta markkinoinnista. Damir on mainittu Mashablessa, Wiredissä, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muut julkaisut. Hän matkustaa Arabiemiirikuntien, Turkin, Venäjän ja IVY-maiden välillä digitaalisena nomadina. Damir suoritti kandidaatin tutkinnon fysiikasta, jonka hän uskoo antaneen hänelle kriittisen ajattelun taidot menestyäkseen jatkuvasti muuttuvassa internetin maisemassa.
lisää artikkeleita
Damir on tiimin johtaja, tuotepäällikkö ja toimittaja osoitteessa Metaverse Post, kattaa aiheita, kuten AI/ML, AGI, LLMs, Metaverse ja Web3- liittyvät kentät. Hänen artikkelinsa houkuttelevat yli miljoonan käyttäjän massiivisen yleisön joka kuukausi. Hän näyttää olevan asiantuntija, jolla on 10 vuoden kokemus hakukoneoptimoinnista ja digitaalisesta markkinoinnista. Damir on mainittu Mashablessa, Wiredissä, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muut julkaisut. Hän matkustaa Arabiemiirikuntien, Turkin, Venäjän ja IVY-maiden välillä digitaalisena nomadina. Damir suoritti kandidaatin tutkinnon fysiikasta, jonka hän uskoo antaneen hänelle kriittisen ajattelun taidot menestyäkseen jatkuvasti muuttuvassa internetin maisemassa.
