A Microsoft kiadott egy diffúziós modellt, amely egy személy egyetlen fényképéből 3D avatárt tud felépíteni
Röviden
Egy személy arcának egyetlen 2D-s képe felhasználható 3D-s avatár létrehozására a 3D Avatar Diffusion gépi tanulási technikával.
Használható arra, hogy valósághű 3D-s képet nyújtson a személyről játék vagy egyéb felhasználás céljából, vagy virtuális valóság (VR) vagy kiterjesztett valóság (AR) élményt nyújtson.
A 3D Avatar Diffusion egy gépi tanulási algoritmus, amely egyetlen 2D-s képet készíthet egy emberi arcról, és háromdimenziós (3D) avatárt hozhat létre. Az avatár ezután felhasználható virtuális valóság (VR) vagy kiterjesztett valóság (AR) élmény létrehozására, vagy egyszerűen valósághű 3D-s nézet biztosítására a személyről játék vagy egyéb célokra.
A diffúziós modell az volt fejlett a Microsoft Research kutatócsoportja, és a folyóiratban megjelent cikk írja le arXiv.
A 3D Avatar Diffusion egy diffúziós modellnek nevezett gépi tanulási algoritmuson alapul. A diffúziós modellek generatív modellek, ami azt jelenti, hogy új, a betanítási adatokhoz hasonló adatokat generálhatnak. Diffúziós modellek Korábban is használták 3D képek előállítására 2D képekből, de az ADM az első olyan diffúziós modell, amely egyetlen 3D képből képes valósághű 2D avatárt generálni.
A modell betanításához a kutatók több mint 200,000 3 2D arcmodellből álló adatkészletet használtak. Az adatkészlet sokféle arcot tartalmazott, különböző bőrtónusokkal, frizurákkal és arcvonásokkal. Az ADM ezután képes volt megtanulni a kapcsolatot a 3D kép és a 3D arcmodell között, és egyetlen 2D képből valósághű XNUMXD avatárt generált.
A modell használható avatar generálására is egy másik szögből készült fotóból
Ez a tanulmány egy 3D generatív modellt javasol, amely diffúziós modellek segítségével automatikusan 3D digitális avatarokat hoz létre, amelyek neurális sugárzási mezőként jelennek meg. A 3D-vel kapcsolatos túl magas memória- és feldolgozási követelmények miatt a jó minőségű avatarokhoz szükséges gazdag funkciók létrehozása óriási probléma. A fejlesztők azt javasolják, hogy a kiterjesztett diffúziós hálózat (Rodin) foglalkozzon ezzel a problémával.
Ez a hálózat egy neurális sugárzási mező számos 2D-s jellemzőtérképét görgeti ki egyetlen 2D jellemzősíkra, ahol a modell 3D-s diffúziót hajt végre. A Rodin-modell 3D-tudatos konvolúciót használ, amely a 2D jellemzősík kivetített jellemzőit a 3D-ben való eredeti kapcsolatuk szerint kezeli, hogy biztosítsa a nagyon szükséges számítási hatékonyságot, miközben megőrzi a diffúzió integritását 3D-ben.
Tudjon meg többet az AI-ról:
A felelősség megtagadása
Összhangban a A Trust Project irányelvei, kérjük, vegye figyelembe, hogy az ezen az oldalon közölt információk nem minősülnek jogi, adózási, befektetési, pénzügyi vagy bármilyen más formájú tanácsnak, és nem is értelmezhetők. Fontos, hogy csak annyit fektessen be, amennyit megengedhet magának, hogy elveszítsen, és kérjen független pénzügyi tanácsot, ha kétségei vannak. További információkért javasoljuk, hogy tekintse meg a szerződési feltételeket, valamint a kibocsátó vagy hirdető által biztosított súgó- és támogatási oldalakat. MetaversePost elkötelezett a pontos, elfogulatlan jelentéstétel mellett, de a piaci feltételek előzetes értesítés nélkül változhatnak.
A szerzőről
Damir a csapat vezetője, termékmenedzsere és szerkesztője Metaverse Post, olyan témákkal foglalkozik, mint az AI/ML, AGI, LLMs, Metaverse és Web3- kapcsolódó mezők. Cikkei havonta több mint egymillió felhasználót vonzanak. Úgy tűnik, szakértő, aki 10 éves tapasztalattal rendelkezik a SEO és a digitális marketing területén. Damirt a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto és más kiadványok. Digitális nomádként utazik az Egyesült Arab Emírségek, Törökország, Oroszország és a FÁK között. Damir fizikából szerzett bachelor-diplomát, és úgy gondolja, hogy ez megadta neki azokat a kritikus gondolkodási készségeket, amelyek szükségesek ahhoz, hogy sikeres legyen az internet folyamatosan változó táján.
További cikkek
Damir a csapat vezetője, termékmenedzsere és szerkesztője Metaverse Post, olyan témákkal foglalkozik, mint az AI/ML, AGI, LLMs, Metaverse és Web3- kapcsolódó mezők. Cikkei havonta több mint egymillió felhasználót vonzanak. Úgy tűnik, szakértő, aki 10 éves tapasztalattal rendelkezik a SEO és a digitális marketing területén. Damirt a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto és más kiadványok. Digitális nomádként utazik az Egyesült Arab Emírségek, Törökország, Oroszország és a FÁK között. Damir fizikából szerzett bachelor-diplomát, és úgy gondolja, hogy ez megadta neki azokat a kritikus gondolkodási készségeket, amelyek szükségesek ahhoz, hogy sikeres legyen az internet folyamatosan változó táján.
