TextMesh: uus Stable Diffusion- Google'i tekstipõhine 3D-mudel
Põgusalt
TextMesh on Google'i uus tekstist 3D-vormingus töö, mis täiustab praegu moodsat kasutusviisi Stable Diffusion et genereerida sama põhiviipa (2D-pilt) erinevad nurgad ja seejärel koostatakse sellest NeRF-i abil 3D-võrk.
Viimasel ajal on tänu hajusate kujutiste genereerimise mudelitele suurt edu saavutanud võimalus luua tekstiviipadest 2D-pilte. Need mudelid on väga võimelised tootma kvaliteetseid pildinäidiseid, kasutades tekstiviipa, mis võimaldab lihtsat teksti-pildi liidest. Tuginedes nendele edusammudele 2D-kujutiste genereerimise valdkonnas, on selles tööstusharus suur küsimus, kas tekstist 3D-mudelite loomiseks on võimalik rakendada sarnaseid difusioonimudeleid.
Ja nüüd on Google tutvustanud uut teksti-3D-meetodit, millel on elegantne nimi TextMesh. See meetod tõotab parandada praegu moes lähenemist Stable Diffusion-põhine tekst-3D-mudel põlvkond. Põhimõtteliselt luuakse mitu nurka, sisestades mudelisse põhilise 2D-sisendi. Seejärel töödeldakse tulemusi ja assimileeritakse 3D-võrku, kasutades NeRF-i (Neural Radiance Fields) meetodit.
| Soovitan: Prompt Engineering Ultimate Guide 2023: |
Selle uuendusliku lähenemise eelised praegu trendikate DreamFusioni ja CLIPMeshi ees on eelkõige kasutajasõbralik väljund. Selle asemel, et kasutada keerukat NeRF-vormingut, pakub TextMesh 3D-võrku tekstuuridega, muutes selle reaalseks kasutamiseks palju paremini kasutatavaks. Lisaks väldib see lähenemisviis teiste mudelite sageli esinevat kõrge küllastusefekti ja suudab suurendada detaile.
. mudel töötab moodustades esmalt NeRF-i abil sisendpildist 3D-võrgu. Tulemused läbivad seejärel SDF-i (Signed Distance Fields) raamistiku, et täpsustada tekstuuri veelgi, parandades väljundvõrgu üldist selgust. Rääkimata sellest, et SDF-i raamistik aitab vältida teiste 3D-vormingute üleküllastumist mudelid tavaliselt kannatavad.
Näitena loodud 3D-võrgud
See lähenemisviis kasutab ära DiG-mudelite edu ja laiendab NeRF-võrke, et need põhineksid SDF-i selgrool. See loob paremad 3D-silma eraldamise võimalused ja palju realistlikuma välimusega 3D-võrgud võrreldes eelnevalt käsitletud meetoditega.
TextMeshi kasutamise tulemused on äärmiselt veenvad. Autorid pakuvad isegi lingi nende mudeli järgi loodud orava pildile, mis pole midagi vähemat kui muljetavaldav.
TextMesh on revolutsiooniline uus 3D-mudel, mis pakub palju eeliseid ja suudab toota äärmiselt realistlikke 3D-võrke. Selle kasutamine muutub lähitulevikus kindlasti üha populaarsemaks.
Loe AI kohta lähemalt:
Kaebused
Vastavalt Usaldusprojekti juhised, pange tähele, et sellel lehel esitatud teave ei ole mõeldud ega tohiks tõlgendada kui juriidilist, maksu-, investeerimis-, finants- või muud nõuannet. Oluline on investeerida ainult seda, mida saate endale lubada kaotada, ja kahtluste korral küsida sõltumatut finantsnõu. Lisateabe saamiseks soovitame vaadata nõudeid ja tingimusi ning väljaandja või reklaamija pakutavaid abi- ja tugilehti. MetaversePost on pühendunud täpsele ja erapooletule aruandlusele, kuid turutingimusi võidakse ette teatamata muuta.
Umbes Autor
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
Veel artikleid
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
