Gen-1: AI generuoja naujus vaizdo įrašus iš esamų, derindama raginimus ir vaizdus
Trumpai
Gen-1 yra neuroninis tinklas, kuris gali generuoti naujus vaizdo įrašus iš esamų juos derindamas raginimai ir vaizdai.
Jis taip pat gali būti naudojamas kuriant visiškai naujus vaizdo įrašus nuo nulio.
Galimybė generuoti naujus vaizdo įrašus iš esamų turi daugybę galimų pritaikymų.
„RunWayML“, dirbtinio intelekto startuolis, paskelbė naujas produktas, vadinamas Gen-1, neuroninis tinklas, galintis generuoti naujus vaizdo įrašus iš esamų, derindamas raginimus ir vaizdus. Daugelį metų neuroniniai tinklai apsiribojo stiliaus perdavimo užduotimi, ty vaizdo paėmimo ir kito vaizdo stiliaus pritaikymo jam procesas. Taip gauname stulbinančius gilaus mokymosi stiliaus perdavimo vaizdo įrašus, kuriuose, pavyzdžiui, peizažas perteikiamas Van Gogho „Žvaigždėtos nakties“ stiliumi.
Dabar, naudojant Gen-1, neuroniniai tinklai gali padaryti daugiau nei tik stiliaus perdavimą. Jis gali generuoti naujus vaizdo įrašus nuo nulio, naudodamas raginimus ir vaizdus kaip įvestį. Tai atveria visiškai naujas galimybes AI sukurti vaizdo įrašai. Šiuo metu „Gen-1“ sukurti vaizdo įrašai yra trumpi ir paprasti. Tačiau tobulėjant technologijai galime tikėtis, kad pamatysime sudėtingesnius ir sudėtingesnius tikroviški vaizdo įrašai, kuriuos sukuria AI.
| Rekomenduojamas įrašas: Vyrų reprodukcinė sveikata gerinama žiūrint suaugusiems skirtus vaizdo įrašus virtualioje realybėje |
Kas yra Gen-1?
Stiprius paveikslėlių kūrimo ir redagavimo įrankius atrakina tekstas generatyvinės difuzijos modeliai. Nors jie buvo taikomi kuriant vaizdo įrašus, dabartiniai jau esamos medžiagos turinio redagavimo metodai, išlaikant jo struktūrą, reikalauja brangaus kiekvieno įvesties perkvalifikavimo arba priklauso nuo rizikingo vaizdo pakeitimų sklidimo tarp kadrų.
Kūrėjai aprašo struktūra ir turiniu valdomos vaizdo sklaidos modelį, kuris keičia filmus pagal rašytinį arba vaizdinį norimo rezultato aprašymą. Dėl nepakankamo atsiejimo kyla konfliktų tarp vartotojo pateiktų turinio modifikacijų ir struktūros vaizdų. Jie parodo, kad struktūra ir turinio vientisumas gali būti kontroliuojamas mokantis monokuliarinio gylio įvertinimo įvairiais detalumo lygiais.
Sintezuokite naujus vaizdo įrašus tikroviškai ir nuosekliai, taikydami vaizdo ar teksto raginimo kompoziciją ir stilių šaltinio vaizdo įrašo struktūrai. Tai tarsi filmavimas kažko naujo, iš tikrųjų nieko nefilmuojant.
Vaizdo ar raginimo stiliaus perkėlimas į kiekvieną vaizdo įrašo kadrą gali būti puikus būdas suvienodinti projektą, suteikti jam visa apimančią vaizdinę temą ir sukurti nuoseklumą.
Naudojant programinę įrangą ir kūrybišką dizainą, maketai gali būti paversti estetiškai patraukliais ir interaktyviais vaizdais, kurie atgaivina vartotojo viziją.
Naudojant vaizdo įrašų redagavimo funkcijas, lengva atskirti vaizdo įrašo dalis ir patobulinti jas teksto raginimais.
Taikant įvesties vaizdą arba greitai netekstūriniai atvaizdai gali labai pagerinti jų tikroviškumą ir atgaivinti 3D modelius.
„Runway Research“ skirta kurti daugiarūšes AI sistemas, kurios įgalina naujas kūrybiškumo formas. Gen-1 yra dar vienas esminis žingsnis į priekį šioje misijoje. Jei esate kūrybingas ir norite eksperimentuoti su pasakojimo ateitimi, toliau pateikite prieigos užklausą.
Gen-1 taip pat gali būti naudojamas kuriant visiškai naujus vaizdo įrašus nuo nulio. Jis gali būti naudojamas įvairiems tikslams, įskaitant naujų esamų filmų versijų kūrimą arba naujų filmų kūrimą. Šios naujienos neabejotinai sujaudins filmų kūrėjus ir kitus kūrėjus, kurie nuolat ieško naujų būdų, kaip peržengti savo meno ribas. Su Gen-1 jie dabar turi naują galingą įrankį.
Gebėjimas kurti naujus vaizdo įrašus iš esamų turi daugybę galimų pritaikymų. Pavyzdžiui, jis gali būti naudojamas kuriant naujas esamo vaizdo įrašų turinio versijas, taigi jis gali būti naudojamas kuriant alternatyvias scenų ar kadrų versijas, kurios gali būti per brangios arba logistikos požiūriu sudėtingos.
Galite pateikti paraišką naudoti modelį, kol jis yra beta versijos testavimo metu čia.
Skaitykite daugiau apie AI:
Atsakomybės neigimas
Remdamasi tuo, Pasitikėjimo projekto gairės, atkreipkite dėmesį, kad šiame puslapyje pateikta informacija nėra skirta ir neturėtų būti aiškinama kaip teisinė, mokesčių, investicinė, finansinė ar bet kokia kita konsultacija. Svarbu investuoti tik tai, ką galite sau leisti prarasti, ir, jei turite kokių nors abejonių, kreiptis į nepriklausomą finansinę konsultaciją. Norėdami gauti daugiau informacijos, siūlome peržiūrėti taisykles ir nuostatas bei pagalbos ir palaikymo puslapius, kuriuos pateikia išdavėjas arba reklamuotojas. MetaversePost yra įsipareigojusi teikti tikslias, nešališkas ataskaitas, tačiau rinkos sąlygos gali keistis be įspėjimo.
Apie autorių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
Daugiau straipsnių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
