Ziņojums Tehnoloģija
Februāris 08, 2023

Gen-1: AI ģenerē jaunus videoklipus no esošajiem, apvienojot uzvednes un attēlus

Īsumā

Gen-1 ir neironu tīkls, kas var ģenerēt jaunus videoklipus no esošajiem, apvienojot uzvednes un attēli.

To var izmantot arī, lai no jauna izveidotu pilnīgi jaunus videoklipus.

Iespējai ģenerēt jaunus videoklipus no esošajiem ir vairāki potenciāli pielietojumi.

RunWayML, mākslīgā intelekta starta uzņēmums, ir paziņojusi jauns produkts ar nosaukumu Gen-1, neironu tīkls, kas var ģenerēt jaunus videoklipus no esošajiem, apvienojot uzvednes un attēlus. Jau gadiem ilgi neironu tīkli ir aprobežoti ar stila pārsūtīšanas uzdevumu, kas ir attēla uzņemšanas un cita attēla stila pielietošanas process. Tādā veidā mēs iegūstam tos trīskāršos dziļās mācīšanās stila pārsūtīšanas videoklipus, kuros, piemēram, ainava tiek renderēta Van Goga Zvaigžņotās nakts stilā.

Gen-1: AI ģenerē jaunus videoklipus no esošajiem, apvienojot uzvednes un attēlus
@Midjourney / Tas dīvainais spoks

Tagad, izmantojot Gen-1, neironu tīkli var paveikt vairāk nekā tikai stila pārsūtīšanu. Tas var ģenerēt jaunus videoklipus no jauna, izmantojot uzvednes un attēlus kā ievadi. Tas paver pilnīgi jaunas iespējas AI izveidoti video. Šobrīd Gen-1 ģenerētie videoklipi ir īsi un vienkārši. Bet tehnoloģijai attīstoties, mēs varam sagaidīt sarežģītākus un reālistiskus video, ko ģenerē AI.

Ieteicamā ziņa: Vīriešu reproduktīvā veselība tiek uzlabota, skatoties pieaugušo video virtuālajā realitātē

Kas ir Gen-1?

Spēcīgi attēlu izveides un rediģēšanas rīki tiek atbloķēti, izmantojot teksta vadību ģeneratīvās difūzijas modeļi. Lai gan tās ir izmantotas video veidošanā, pašreizējās metodes jau esošā materiāla satura rediģēšanai, saglabājot tā struktūru, prasa dārgu katra ievades pārkvalifikāciju vai ir atkarīgas no riskantas attēla izmaiņu izplatīšanās starp kadriem.

Izstrādātāji apraksta struktūras un satura vadītas video difūzijas modeli, kas maina filmas, pamatojoties uz vēlamā rezultāta rakstiskiem vai vizuāliem aprakstiem. Nepietiekamas atsaistes dēļ rodas konflikti starp lietotāja nodrošinātajām satura modifikācijām un struktūras attēlojumiem. Tie parāda, ka struktūru un satura integritāti var kontrolēt, apmācot monokulāro dziļuma novērtējumu ar dažādu detalizācijas pakāpi.

Sintezējiet jaunus videoklipus reālistiskā un konsekventā veidā, avota videoklipa struktūrai piemērojot attēla vai teksta uzvednes sastāvu un stilu. Tas ir tāpat kā filmēt kaut ko jaunu, faktiski neko nefilmējot.

Jauna videoklipa sintezēšana, izmantojot šo metodi, ļauj filmu veidotājiem ātri un rentabli izveidot saturu
Jauna videoklipa sintezēšana, izmantojot šo metodi, ļauj filmu veidotājiem ātri un rentabli izveidot saturu

Attēla vai uzvednes stila pārsūtīšana uz katru video kadru var būt lielisks veids, kā apvienot projektu, piešķirt tam visaptverošu vizuālo tēmu un radīt konsekvenci.

Izmantojot programmatūru un radošu dizainu, maketus var pārveidot estētiski pievilcīgos un interaktīvos renderējumos, kas atdzīvina lietotāja redzējumu.

Maketi ļauj dizaineriem vizualizēt savas idejas un radīt taustāmus rezultātus, ko var iesniegt pārskatīšanai
Maketi ļauj dizaineriem vizualizēt savas idejas un radīt taustāmus rezultātus, ko var iesniegt pārskatīšanai

Izmantojot video rediģēšanas funkcijas, ir viegli izolēt videoklipa daļas un uzlabot tās, izmantojot teksta uzvednes.

Lietojot ievades attēlu vai tūlītēja neteksturēti renderējumi var ievērojami uzlabot to reālismu, atdzīvinot 3D modeļus.

Skrejceļa izpēte ir veltīta multimodālu AI sistēmu izveidei, kas nodrošina jaunus radošuma veidus. Gen-1 ir vēl viens no mūsu galvenajiem soļiem šajā misijā. Ja esat radošs un vēlaties eksperimentēt ar stāstu nākotni, pieprasiet piekļuvi tālāk.

Gen-1 var izmantot arī, lai no jauna izveidotu pilnīgi jaunus videoklipus. To var izmantot vairākiem mērķiem, tostarp jaunu esošo filmu versiju izveidei vai jaunu filmu izveidei pavisam. Šīs ziņas noteikti iepriecinās filmu veidotājus un citus radošus cilvēkus, kuri vienmēr meklē jaunus veidus, kā paplašināt savas mākslas robežas. Izmantojot Gen-1, viņu rīcībā tagad ir jauns spēcīgs rīks.

Spēja ģenerēt jaunus videoklipus no esošajiem ir vairāki iespējamie pielietojumi. Piemēram, to varētu izmantot, lai izveidotu jaunas esošā video satura versijas, tāpēc to varētu izmantot, lai izveidotu alternatīvas ainu vai kadru versijas, kuras var būt pārāk dārgas vai loģistiski grūti filmējamas.

Varat pieteikties modeļa lietošanai, kamēr tas ir beta testēšanas laikā šeit.

Lasiet vairāk par AI:

Atbildības noraidīšana

Atbilstīgi Uzticības projekta vadlīnijas, lūdzu, ņemiet vērā, ka šajā lapā sniegtā informācija nav paredzēta un to nedrīkst interpretēt kā juridisku, nodokļu, ieguldījumu, finanšu vai jebkāda cita veida padomu. Ir svarīgi ieguldīt tikai to, ko varat atļauties zaudēt, un meklēt neatkarīgu finanšu padomu, ja jums ir šaubas. Lai iegūtu papildinformāciju, iesakām skatīt pakalpojumu sniegšanas noteikumus, kā arī palīdzības un atbalsta lapas, ko nodrošina izdevējs vai reklāmdevējs. MetaversePost ir apņēmies sniegt precīzus, objektīvus pārskatus, taču tirgus apstākļi var tikt mainīti bez iepriekšēja brīdinājuma.

Par Autors

Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē. 

Vairāk rakstus
Damirs Jalalovs
Damirs Jalalovs

Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē. 

Hot Stories
Pievienojieties mūsu informatīvajam izdevumam.
Jaunākās ziņas

No Ripple līdz Big Green DAO: kā kriptovalūtas projekti veicina labdarību

Izpētīsim iniciatīvas, kas izmanto digitālo valūtu potenciālu labdarības mērķiem.

Uzziniet vairāk

AlphaFold 3, Med-Gemini un citi: veids, kā AI pārveido veselības aprūpi 2024. gadā

AI izpaužas dažādos veidos veselības aprūpē, sākot no jaunu ģenētisku korelāciju atklāšanas līdz robotu ķirurģisko sistēmu pilnvarošanai ...

Uzziniet vairāk
Pievienojieties mūsu novatoriskajai tehnoloģiju kopienai
Lasīt vairāk
Vairāk
Manta tīkls ievieš Native Staking, ļaujot lietotājiem likt MANTA ar Omni Liquid Staking
Markets Ziņojums Tehnoloģija
Manta tīkls ievieš Native Staking, ļaujot lietotājiem likt MANTA ar Omni Liquid Staking
15. gada 2024. maijs
Bloomberg: konsolidācijas fāze pēc sadalīšanas uz pusēm, pirms Bitcoin atgūst savu visu laiku augstāko līmeni
Markets Ziņojums Tehnoloģija
Bloomberg: konsolidācijas fāze pēc sadalīšanas uz pusēm, pirms Bitcoin atgūst savu visu laiku augstāko līmeni
15. gada 2024. maijs
Vitalik Buterin izdod EIP-7706 priekšlikumu par jauna veida gāzes ieviešanu Ethereum darījumiem Calldata
Ziņojums Tehnoloģija
Vitalik Buterin izdod EIP-7706 priekšlikumu par jauna veida gāzes ieviešanu Ethereum darījumiem Calldata
14. gada 2024. maijs
Brīdina, ka Worldcoin WLD žetons nākamajos mēnešos saskarsies ar agresīvu pārdošanas spiedienu un vairāk atbloķēšanas DeFi2 Bybit Trader
Markets Ziņojums Tehnoloģija
Brīdina, ka Worldcoin WLD žetons nākamajos mēnešos saskarsies ar agresīvu pārdošanas spiedienu un vairāk atbloķēšanas DeFi2 Bybit Trader
14. gada 2024. maijs
CRYPTOMERIA LABS PTE. LTD.