Microsoft je izdal difuzijski model, ki lahko sestavi 3D avatar iz ene fotografije osebe
Na kratko
Eno samo 2D sliko obraza osebe je mogoče uporabiti za ustvarjanje 3D avatarja s tehniko strojnega učenja 3D Avatar Diffusion.
Uporablja se lahko za zagotavljanje realističnega 3D-pogleda osebe za igranje iger ali druge uporabe ali za zagotavljanje izkušnje navidezne resničnosti (VR) ali razširjene resničnosti (AR).
3D Avatar Diffusion je algoritem strojnega učenja, ki lahko posname eno samo 2D sliko človeškega obraza in ustvari tridimenzionalni (3D) avatar. Avatar se lahko nato uporabi za ustvarjanje izkušnje navidezne resničnosti (VR) ali razširjene resničnosti (AR) ali preprosto za zagotavljanje realističnega 3D-pogleda osebe za igranje iger ali druge namene.
Difuzijski model je bil razvili skupina raziskovalcev pri Microsoft Research in je opisana v članku, objavljenem v reviji arXiv.
3D Avatar Diffusion temelji na vrsti algoritma strojnega učenja, imenovanega difuzijski model. Difuzijski modeli so generativni modeli, kar pomeni, da lahko ustvarijo nove podatke, ki so podobni podatkom o usposabljanju. Difuzijski modeli so že prej uporabljali za ustvarjanje 3D slik iz 2D slik, vendar je ADM prvi difuzijski model, ki lahko ustvari realističen 3D avatar iz ene 2D slike.
Za usposabljanje modela so raziskovalci uporabili nabor podatkov več kot 200,000 3D modelov obrazov. Nabor podatkov je vključeval široko paleto obrazov z različnimi toni kože, pričeskami in potezami obraza. ADM se je nato lahko naučil razmerja med 2D sliko in 3D modelom obraza ter ustvaril realističen 3D avatar iz ene same 2D slike.
Model je mogoče uporabiti tudi za ustvarjanje avatarja iz fotografije, ki je bila posneta iz drugega kota
Ta študija predlaga 3D generativni model, ki samodejno ustvari 3D digitalne avatarje, ki so predstavljeni kot nevronska sevalna polja z uporabo difuzijskih modelov. Zaradi previsokih zahtev po pomnilniku in obdelavi, povezanih s 3D, je ustvarjanje bogatih funkcij, potrebnih za visokokakovostne avatarje, velika težava. Razvijalci predlagajo, da bi to težavo rešilo uvedeno difuzijsko omrežje (Rodin).
To omrežje uvaja številne 2D-kartice funkcij polja nevralnega sevanja v eno samo 2D-ploskev, kjer model nato izvaja 3D-zavedano difuzijo. Rodinov model uporablja konvolucijo, ki pozna 3D, ki upošteva projicirane funkcije v 2D ravnini značilnosti v skladu z njihovim prvotnim razmerjem v 3D, da zagotovi prepotrebno računalniško učinkovitost ob ohranjanju celovitosti difuzije v 3D.
Preberite več o AI:
Zavrnitev odgovornosti
V skladu z Smernice projekta Trust, upoštevajte, da informacije na tej strani niso namenjene in se jih ne sme razlagati kot pravni, davčni, naložbeni, finančni ali kakršen koli drug nasvet. Pomembno je, da vlagate samo tisto, kar si lahko privoščite izgubiti, in da poiščete neodvisen finančni nasvet, če imate kakršne koli dvome. Za dodatne informacije predlagamo, da si ogledate določila in pogoje ter strani s pomočjo in podporo, ki jih nudi izdajatelj ali oglaševalec. MetaversePost se zavzema za natančno in nepristransko poročanje, vendar se tržni pogoji lahko spremenijo brez predhodnega obvestila.
O avtorju
Damir je vodja ekipe, produktni vodja in urednik pri Metaverse Post, ki pokriva teme, kot so AI/ML, AGI, LLMs, Metaverse in Web3- sorodna področja. Njegovi članki vsak mesec pritegnejo množično občinstvo več kot milijon uporabnikov. Zdi se, da je strokovnjak z 10-letnimi izkušnjami na področju SEO in digitalnega trženja. Damir je bil omenjen v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto in druge publikacije. Kot digitalni nomad potuje med ZAE, Turčijo, Rusijo in SND. Damir je diplomiral iz fizike, kar mu je po njegovem mnenju dalo sposobnosti kritičnega razmišljanja, potrebne za uspeh v nenehno spreminjajočem se okolju interneta.
več člankov
Damir je vodja ekipe, produktni vodja in urednik pri Metaverse Post, ki pokriva teme, kot so AI/ML, AGI, LLMs, Metaverse in Web3- sorodna področja. Njegovi članki vsak mesec pritegnejo množično občinstvo več kot milijon uporabnikov. Zdi se, da je strokovnjak z 10-letnimi izkušnjami na področju SEO in digitalnega trženja. Damir je bil omenjen v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto in druge publikacije. Kot digitalni nomad potuje med ZAE, Turčijo, Rusijo in SND. Damir je diplomiral iz fizike, kar mu je po njegovem mnenju dalo sposobnosti kritičnega razmišljanja, potrebne za uspeh v nenehno spreminjajočem se okolju interneta.
