TextMesh: naujas Stable Diffusion- Teksto į 3D modelis iš Google
Trumpai
„TextMesh“ yra naujas „Google“ sukurtas teksto į 3D darbas, patobulinantis dabar madingą naudojimo būdą Stable Diffusion generuoti skirtingus tos pačios pagrindinės užuominos (2D paveikslėlio) kampus, o tada naudojant NeRF surenkamas 3D tinklelis.
Pastaruoju metu galimybė generuoti 2D vaizdus iš tekstinių raginimų sulaukė didelio pasisekimo dėl difuzinio vaizdo generavimo modelių darbo. Šie modeliai gali sukurti aukštos kokybės vaizdų pavyzdžius pagal teksto raginimą, leidžiantį naudoti paprastą teksto į vaizdą sąsają. Remiantis šia pažanga 2D vaizdų generavimo srityje, didelis šios pramonės klausimas yra, ar įmanoma taikyti panašius difuzijos modelius kuriant 3D modelius iš teksto.
Ir dabar „Google“ pristatė naują teksto į 3D metodą su elegantišku pavadinimu TextMesh. Šis metodas žada pagerinti dabar madingą požiūrį Stable DiffusionPagrindu teksto į 3D modelis karta. Iš esmės keli kampai generuojami įvedant į modelį pagrindinę 2D įvestį. Tada rezultatai apdorojami ir asimiliuojami į 3D tinklelį, naudojant neuroninio spinduliavimo laukų (NeRF) metodą.
| Rekomenduojama: Prompt Engineering Ultimate Guide 2023: |
Šio naujoviško požiūrio pranašumai, palyginti su šiuo metu madingais DreamFusion ir CLIPMesh, visų pirma yra patogus vartotojui rezultatas. Užuot naudoję sudėtingą NeRF formatą, TextMesh pateikia 3D tinklelį su tekstūromis, todėl jis yra daug labiau pritaikytas naudoti realiame pasaulyje. Be to, šis metodas leidžia išvengti dažnai patiriamo didelio kitų modelių prisotinimo efekto ir leidžia padidinti detales.
Šios modelio darbai pirmiausia iš įvesties vaizdo NeRF pagalba suformuojant 3D tinklelį. Tada rezultatai pereina per SDF (Signed Distance Fields) sistemą, kad dar labiau patobulintų tekstūrą ir pagerintų bendrą išvesties tinklelio aiškumą. Jau nekalbant apie tai, kad SDF sistema padeda išvengti perpildymo efekto, kurį sukelia kiti 3D modeliai dažniausiai kenčia nuo.
3D tinkleliai sukurti kaip pavyzdys
Šis metodas pasinaudoja DiG modelių sėkme ir išplečia NeRF tinklus, kad jie būtų pagrįsti SDF magistrale. Tai pagerina 3D tinklelio ištraukimo galimybes ir daug tikroviškiau atrodančius 3D tinklelius, palyginti su anksčiau aptartais metodais.
„TextMesh“ naudojimo rezultatai yra labai įtikinami. Autoriai netgi pateikia nuorodą į voverės paveikslą, sukurtą naudojant jų modelį, kuris yra ne mažiau įspūdingas.
„TextMesh“ pasirodė esąs revoliucinis naujas 3D modelis, siūlantis daugybę privalumų ir galintis sukurti itin tikroviškus 3D tinklelius. Jo naudojimas artimiausiu metu taps vis populiaresnis.
Skaitykite daugiau apie AI:
Atsakomybės neigimas
Remdamasi tuo, Pasitikėjimo projekto gairės, atkreipkite dėmesį, kad šiame puslapyje pateikta informacija nėra skirta ir neturėtų būti aiškinama kaip teisinė, mokesčių, investicinė, finansinė ar bet kokia kita konsultacija. Svarbu investuoti tik tai, ką galite sau leisti prarasti, ir, jei turite kokių nors abejonių, kreiptis į nepriklausomą finansinę konsultaciją. Norėdami gauti daugiau informacijos, siūlome peržiūrėti taisykles ir nuostatas bei pagalbos ir palaikymo puslapius, kuriuos pateikia išdavėjas arba reklamuotojas. MetaversePost yra įsipareigojusi teikti tikslias, nešališkas ataskaitas, tačiau rinkos sąlygos gali keistis be įspėjimo.
Apie autorių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
Daugiau straipsnių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
