TextMesh: jauns Stable Diffusion-Teksts-3D modelis no Google
Īsumā
TextMesh ir jauns Google izstrādāts teksts-3D darbs, kas uzlabo tagad modīgo lietošanas pieeju Stable Diffusion lai ģenerētu dažādus vienas un tās pašas pamata uzvednes leņķus (2D attēls), un pēc tam no tā, izmantojot NeRF, tiek salikts 3D tīkls.
Pēdējā laikā iespēja ģenerēt 2D attēlus no teksta uzvednēm ir guvusi lielus panākumus, pateicoties difūzo attēlu ģenerēšanas modeļu darbam. Šie modeļi spēj radīt augstas kvalitātes attēlu paraugus, izmantojot teksta uzvedni, nodrošinot vienkāršu teksta-attēla interfeisu. Balstoties uz šiem sasniegumiem 2D attēlu ģenerēšanas jomā, lielais jautājums šajā nozarē ir par to, vai ir iespējams izmantot līdzīgus difūzijas modeļus, lai ģenerētu 3D modeļus no teksta.
Un tagad Google ir ieviesusi jaunu teksta pārveides 3D metodi ar gludu nosaukumu TextMesh. Šī metode sola uzlabot tagad modē pieejamo pieeju Stable Diffusionbalstītu teksta-3D modelis paaudzei. Pamatā tiek ģenerēti vairāki leņķi, modelī ievadot pamata 2D ievadi. Pēc tam rezultāti tiek apstrādāti un asimilēti 3D tīklā, izmantojot neironu starojuma lauku (Neural Radiance Fields — NeRF) pieeju.
| Ieteicams: Prompt Engineering Ultimate Guide 2023: |
Šīs novatoriskās pieejas priekšrocības salīdzinājumā ar pašlaik modernajiem DreamFusion un CLIPMesh galvenokārt ir lietotājam draudzīga izvade. Tā vietā, lai izmantotu izaicinošo NeRF formātu, TextMesh nodrošina 3D sietu ar tekstūrām, tādējādi padarot to daudz piemērotāku lietošanai reālajā pasaulē. Turklāt šī pieeja ļauj izvairīties no bieži sastopamā citu modeļu augstā piesātinājuma efekta un izdodas palielināt detaļas.
Jūsu darbs IR Klientu apkalpošana modeļu darbi vispirms izveidojot 3D sietu no ievades attēla ar NeRF palīdzību. Pēc tam rezultāti iziet cauri SDF (Signed Distance Fields) sistēmai, lai vēl vairāk uzlabotu tekstūru, uzlabojot izvades sieta kopējo skaidrību. Nemaz nerunājot par to, ka SDF sistēma palīdz izvairīties no pārsātinājuma efekta, ko rada citi 3D modeļi parasti cieš no.
3D tīkli, kas izveidoti kā piemērs
Šī pieeja izmanto DiG modeļu panākumus un paplašina NeRF tīklus, lai tie būtu balstīti uz SDF mugurkaulu. Tas rada uzlabotas 3D sieta ekstrakcijas iespējas un daudz reālistiskāku izskatu, salīdzinot ar iepriekš apspriestajām metodēm.
Rezultāti, izmantojot TextMesh, ir ārkārtīgi pārliecinoši. Autori pat sniedz saiti uz vāveres attēlu, kas izveidots, izmantojot viņu modeli, un tas ir ne mazāk kā iespaidīgs.
TextMesh pierāda sevi kā revolucionāri jaunu 3D modeli, kas piedāvā daudz priekšrocību un var radīt ārkārtīgi reālistiskus 3D tīklus. Tā izmantošana tuvākajā nākotnē kļūs arvien populārāka.
Lasiet vairāk par AI:
Atbildības noraidīšana
Atbilstīgi Uzticības projekta vadlīnijas, lūdzu, ņemiet vērā, ka šajā lapā sniegtā informācija nav paredzēta un to nedrīkst interpretēt kā juridisku, nodokļu, ieguldījumu, finanšu vai jebkāda cita veida padomu. Ir svarīgi ieguldīt tikai to, ko varat atļauties zaudēt, un meklēt neatkarīgu finanšu padomu, ja jums ir šaubas. Lai iegūtu papildinformāciju, iesakām skatīt pakalpojumu sniegšanas noteikumus, kā arī palīdzības un atbalsta lapas, ko nodrošina izdevējs vai reklāmdevējs. MetaversePost ir apņēmies sniegt precīzus, objektīvus pārskatus, taču tirgus apstākļi var tikt mainīti bez iepriekšēja brīdinājuma.
Par Autors
Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē.
Vairāk rakstus
Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē.
