Microsoft je objavio difuzijski model koji može napraviti 3D avatar od jedne fotografije osobe
Ukratko
Jedna 2D slika lica osobe može se koristiti za generiranje 3D avatara pomoću tehnike strojnog učenja 3D Avatar Diffusion.
Može se koristiti za pružanje realističnog 3D prikaza osobe za igranje ili druge upotrebe ili za pružanje iskustva virtualne stvarnosti (VR) ili proširene stvarnosti (AR).
3D Avatar Diffusion algoritam je strojnog učenja koji može uzeti jednu 2D sliku ljudskog lica i stvoriti trodimenzionalni (3D) avatar. Avatar se tada može koristiti za stvaranje iskustva virtualne stvarnosti (VR) ili proširene stvarnosti (AR) ili za jednostavno pružanje realističnog 3D prikaza osobe za igranje ili druge svrhe.
Model difuzije bio je razvijen tim istraživača u Microsoft Researchu i opisan je u radu objavljenom u časopisu arXiv.
3D Avatar Diffusion temelji se na vrsti algoritma strojnog učenja koji se naziva model difuzije. Difuzijski modeli su generativni modeli, što znači da mogu generirati nove podatke koji su slični podacima obuke. Difuzijski modeli su se prije koristili za generiranje 3D slika iz 2D slika, ali ADM je prvi difuzijski model koji može generirati realističan 3D avatar iz jedne 2D slike.
Kako bi obučili model, istraživači su koristili skup podataka od preko 200,000 3D modela lica. Skup podataka uključivao je veliki izbor lica s različitim tonovima kože, frizurama i crtama lica. ADM je tada mogao naučiti odnos između 2D slike i 3D modela lica i generirati realističan 3D avatar iz jedne 2D slike.
Model se također može koristiti za generiranje avatara iz fotografije koja je snimljena iz drugog kuta
Ova studija predlaže 3D generativni model koji automatski stvara 3D digitalne avatare koji su predstavljeni kao polja neuralnog zračenja pomoću modela difuzije. Zbog prevelikih zahtjeva za memorijom i obradom povezanih s 3D, stvaranje bogatih značajki potrebnih za visokokvalitetne avatare veliki je problem. Razvojni programeri predlažu da se ovaj problem riješi roll-out difuzijskom mrežom (Rodin).
Ova mreža izbacuje brojne 2D mape značajki polja neuralnog zračenja u jednu ravninu 2D značajki, gdje model zatim izvršava 3D-svjesnu difuziju. Rodinov model koristi 3D-svjesnu konvoluciju, koja prati projicirane značajke u ravnini 2D značajki u skladu s njihovim izvornim odnosom u 3D, kako bi se osigurala prijeko potrebna računalna učinkovitost uz održavanje integriteta difuzije u 3D.
Pročitajte više o AI:
Izjava o odricanju od odgovornosti
U skladu s Smjernice projekta povjerenja, imajte na umu da informacije navedene na ovoj stranici nemaju namjeru i ne smiju se tumačiti kao pravni, porezni, investicijski, financijski ili bilo koji drugi oblik savjeta. Važno je ulagati samo ono što si možete priuštiti izgubiti i potražiti neovisni financijski savjet ako imate bilo kakvih nedoumica. Za dodatne informacije predlažemo da pogledate odredbe i uvjete, kao i stranice za pomoć i podršku koje pruža izdavatelj ili oglašivač. MetaversePost je predan točnom, nepristranom izvješćivanju, ali tržišni uvjeti podložni su promjenama bez prethodne najave.
O autoru
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
Više članaka
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
