Kako generirati animaciju pretvaranja slike pomoću ControlNeta
Zbog ranijeg eksperimenta provoditid, imali smo ideju koristiti ControlNet za preoblikovanje. Tek tada smo prešli na korištenje deep2img modela, koji može stvoriti sliku iz mape dubine, umjesto ControlNeta. A ControlNet može funkcionirati ne samo dubinski. Ovaj post ima više informacija o tehnici.
Ukratko ću vam dati pregled postupka. Opcija jačine denoisinga, koja utječe na broj koraka tijekom generiranja, dostupna nam je ako generiramo sliku u img2img. Na primjer, s koracima = 30 i snagom uklanjanja šuma = 0.5, preostat će samo 15 koraka za stvaranje. Ovo razmišljanje može se primijeniti na animiranje morfa. Možete pretvoriti bilo koju sliku; portreti nisu jedini koji se mogu raditi.
Snimi originalnu sliku. Aktivirajte ControlNet ostavljajući okvir slike prazan. Odaberite početnu vrijednost -1 za generiranje nasumičnih testova; broj serija utječe na njihovu količinu. Možete eksperimentirati s parametrima navođenja, težinom primljene kartice i načinom rada ControlNet. Ako vam se sviđa generiranje, povucite ga mišem na img2img i zatim ponovite postupak, tražeći sliku koja će na kraju postati druga slika. Kako je svaka slika završena, postavlja se pitanje kako napraviti animaciju. (Za početak, ne zaboravite postaviti brojač serija na 1 kako biste izbjegli stvaranje dodatnih fotografija.)
Sada ćemo upotrijebiti intrigantno rješenje, ali kasnije ću govoriti o njegovim nedostacima.
Koristit će se dijagram XYZ; morate ga odabrati s popisa skripti. Omogućit će nam stvaranje ne samo konačne slike, već i prijelaza s izvorne slike.
Vrijednosti X stavljamo u redak koji glasi:
0.0.296.0.39.0.459.0.515.0.563.0.606.0.644.0.68.0.713.0.743.0.772.0.799.0.825.0.85.0.874.0.897.0.919.0.94.0.961.
To znači da ćemo, kada počne generiranje, dobiti 21 sliku umjesto samo jedne (broj vrijednosti odvojenih zarezima). Zašto je ova linija tamo? Na primjer, može izgledati drugačije.
Ovaj format ga čini jednostavnijim za razumijevanje: tražite 20 slika od automatiziranog sustava i tražite od njega da pokaže kako će uklanjanje buke utjecati na ishod za vrijednosti u rasponu od 0 do 1. Nedostatak druge opcije je da rezultira linearnom promjenom vrijednosti , zbog karakteristika uklanjanja buke, ne čini se realističnim pretvaranjem. Brojke blizu nule gotovo da nemaju utjecaja na ishod. a na razinama većim od 0.5, , počinje vrlo primjetno utjecati.
Kao rezultat, prva linija je krivulja tipa x.4, odnosno x podignut za 0.4. Ravna, linearna funkcija i zakrivljena, koja će proizvesti točniji rezultat, suprotstavljeni su na slici. Za izradu takvog niza možete koristiti mješalicu.
Morate odabrati količinu okvira za prijelaz prije stvaranja linije. Može se uređivati u postavkama projekta.
Morate izvršiti više koraka kako biste dobili liniju. Prvo eksperimentirajte s oblikom krivulje. Da biste to postigli, odaberite "Delete Keyframes" iz kontekstnog izbornika parametra animacije.
Ovdje je formula za dobivanje krivulje; parametar je postao plav, što znači da upravljački program radi u njemu.
Ovdje se možete petljati s vrijednošću. 4. Ali, izbjegavajte ići prenisko. okvir/21 označava pomak vrijednosti od 0 do 1 u okviru 0 do okvira 21. Ostaju samo vrijednosti između 1 i 20 okvira.
Ipak, ključevi nisu vozač. Prvo se moraju pripremiti. Da biste to postigli, kliknite Object > Animation > Bake Action u 3d prozoru i zatim kliknite OK.
Međutim, to će utjecati na sve moguće ključeve objekta i treba ih izbrisati. Odaberite sve osim prvog retka i pritisnite X na tipkovnici (miš bi se trebao nalaziti ispod popisa).
A sada, da dobijete liniju na lijevoj strani ekrana, kliknite na play i otvorite prozor konzole.
Imam niz koji se može kopirati.
Sada da biste napravili animaciju, morate napraviti ovaj proces zasebno za svaku poziciju slike koja je napravljena na početku, a zatim je spojiti u animaciju u nekom video editoru.
Da, proces još nije automatiziran, ali sve možete u potpunosti prilagoditi sebi. Možete promijeniti model generiranja i ControlNet model i način, omogućiti ili onemogućiti predproces ili bilo što drugo što želite. Glavna stvar je ne izgubiti dobre rezultate i zatim ponoviti sve ispravno za stvaranje animacije.
Nedostaci tehnologije — ne biste trebali postavljati puno temelja za prijelaz. Gore smo napisali da denoise utječe na broj koraka. Može se ispostaviti da će izlaz duplicirati slike jer će nekoliko vrijednosti za uklanjanje šuma biti unutar istog broja koraka. Njihov broj može se promatrati u automatskoj konzoli.
Ova se tehnologija može koristiti u kombinaciji s usporivačima interpolatora, odnosno slanjem animacije da dovrši nedostajuće okvire; ovo će dati glatke promjene.
Pročitajte više povezanih članaka:
Izjava o odricanju od odgovornosti
U skladu s Smjernice projekta povjerenja, imajte na umu da informacije navedene na ovoj stranici nemaju namjeru i ne smiju se tumačiti kao pravni, porezni, investicijski, financijski ili bilo koji drugi oblik savjeta. Važno je ulagati samo ono što si možete priuštiti izgubiti i potražiti neovisni financijski savjet ako imate bilo kakvih nedoumica. Za dodatne informacije predlažemo da pogledate odredbe i uvjete, kao i stranice za pomoć i podršku koje pruža izdavatelj ili oglašivač. MetaversePost je predan točnom, nepristranom izvješćivanju, ali tržišni uvjeti podložni su promjenama bez prethodne najave.
O autoru
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
Više članaka
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
