Gen-1: AI loob viipade ja piltide kombineerimise teel uusi videoid olemasolevatest
Põgusalt
Gen-1 on närvivõrk, mis suudab olemasolevatest videoid kombineerides luua uusi viipasid ja pilte.
Seda saab kasutada ka täiesti uute videote loomiseks nullist.
Võimalusel luua olemasolevatest videotest on mitmeid potentsiaalseid rakendusi.
RunWayML, tehisintellekti startup, teatas uus toode nimega Gen-1, närvivõrk, mis suudab olemasolevatest videoid genereerida, kombineerides viipasid ja pilte. Aastaid on närvivõrgud piirdunud stiiliülekande ülesandega, milleks on pildi võtmine ja sellele teise pildi stiili rakendamine. Nii saame need triibulised süvaõppe stiilis ülekandevideod, kus maastik renderdatakse näiteks Van Goghi Starry Nighti stiilis.
Nüüd saavad Gen-1 abil närvivõrgud teha enamat kui lihtsalt stiiliedastust. See võib luua uusi videoid nullist, kasutades sisendina viipasid ja pilte. See avab täiesti uued võimalused AI-ga loodud videod. Praegu on Gen-1 loodud videod lühikesed ja lihtsad. Kuid tehnoloogia arenedes võime eeldada, et näeme keerukamaid ja AI genereeritud realistlikud videod.
| Soovitatav postitus: Meeste reproduktiivtervist parandab täiskasvanute videote vaatamine virtuaalreaalsuses |
Mis on Gen-1?
Tugevad piltide loomise ja redigeerimise tööriistad on avatud tekstipõhiselt generatiivsed difusioonimudelid. Kuigi neid on kasutatud videote loomisel, nõuavad praegused meetodid juba olemasoleva materjali sisu redigeerimiseks, säilitades selle struktuuri, iga sisendi jaoks kallist ümberõpet või sõltuvad pildimuutuste riskantsest levikust kaadrite vahel.
Arendajad kirjeldavad struktuuri- ja sisupõhise video hajutamise mudelit, mis muudab filme soovitud tulemuse kirjaliku või visuaalse kirjelduse põhjal. Ebapiisava lahtisidumise tõttu tekivad konfliktid kasutaja pakutavate sisu modifikatsioonide ja struktuuri esituste vahel. Need näitavad, et struktuuri ja sisu terviklikkust saab kontrollida erineva detailsuse tasemega monokulaarse sügavuse hindamise koolitusega.
Sünteesige uusi videoid realistlikul ja järjepideval viisil, rakendades lähtevideo struktuurile pildi- või tekstiviipa kompositsiooni ja stiili. See on nagu millegi uue filmimine ilma tegelikult midagi filmimata.
Kujutise või viipa stiili ülekandmine igale videokaadrile võib olla suurepärane viis projekti ühtlustamiseks, üldise visuaalse teema andmiseks ja järjepidevuse loomiseks.
Tarkvara ja loomingulise disaini abil saab makette muuta esteetiliselt meeldivateks ja interaktiivseteks renderdusteks, mis äratavad kasutaja visiooni ellu.
Videotöötlusfunktsioonide abil on lihtne video osi eraldada ja neid tekstiviipade abil täiustada.
Sisendpildi rakendamine või kiire tekstureerimata renderdustega saab nende realistlikkust oluliselt parandada, muutes 3D-mudelid ellu.
Runway Research on pühendunud multimodaalsete tehisintellektisüsteemide ehitamisele, mis võimaldavad uusi loovuse vorme. Gen-1 on järjekordne meie pöördeline samm selles missioonis. Kui olete loov ja soovite loo jutustamise tulevikuga katsetada, taotlege allpool juurdepääsu.
Gen-1 saab kasutada ka täiesti uute videote loomiseks nullist. Seda saab kasutada mitmel otstarbel, sealhulgas olemasolevate filmide uute versioonide loomiseks või uute filmide loomiseks. See uudis erutab kindlasti filmitegijaid ja teisi loomingulisi inimesi, kes otsivad alati uusi viise oma kunsti piire nihutada. Gen-1 abil on nende käsutuses nüüd uus võimas tööriist.
Võime luua uusi videoid olemasolevatest on mitmeid potentsiaalseid rakendusi. Näiteks saab seda kasutada olemasoleva videosisu uute versioonide loomiseks, nii et seda saaks kasutada alternatiivsete versioonide loomiseks stseenidest või kaadritest, mille filmimine võib olla liiga kallis või logistiliselt keeruline.
Saate taotleda mudeli kasutamist, kui see on beetatestimises siin.
Loe AI kohta lähemalt:
Kaebused
Vastavalt Usaldusprojekti juhised, pange tähele, et sellel lehel esitatud teave ei ole mõeldud ega tohiks tõlgendada kui juriidilist, maksu-, investeerimis-, finants- või muud nõuannet. Oluline on investeerida ainult seda, mida saate endale lubada kaotada, ja kahtluste korral küsida sõltumatut finantsnõu. Lisateabe saamiseks soovitame vaadata nõudeid ja tingimusi ning väljaandja või reklaamija pakutavaid abi- ja tugilehti. MetaversePost on pühendunud täpsele ja erapooletule aruandlusele, kuid turutingimusi võidakse ette teatamata muuta.
Umbes Autor
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
Veel artikleid
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
