Tekst SVG-sse: Berkeley teatas abstraktsest pikslipõhisest difusioonimudelist
Põgusalt
Tekstist pildiks süntees – UC Berkeley teadlased demonstreerivad vektorgraafikat koos tekstitingimustega difusioonimudelid
Tekstist pildiks sünteesis on difusioonimudelitel Näidatud silmapaistvad tulemused. Difusioonmudelid õpivad tootma rasterkujutisi äärmiselt erinevatest objektidest ja olukordadest, kasutades tohutuid kommenteeritud piltide andmebaase. Kuid digitaalsete ikoonide, graafika ja kleebiste jaoks kasutavad disainerid tavaliselt piltide vektoresitusi, nagu skaleeritav vektorgraafika (SVG). Vektorgraafika on väike ja seda saab skaleerida mis tahes suurusele.
UC Berkeley demonstreerib, kuidas toota vektorgraafikat, mida saab eksportida SVG-vormingus, kasutades tekstipõhise difusioonimudelit, mis on koolitatud pildi pikslite esitusviisidele. See saavutab selle ilma ulatuslikke subtiitritega SVG-de kogusid kasutamata. Selle asemel vektoriseerivad Berkeley teadlased a tekstist pildiks difusioon proovige ja viimistlege seda Score Distillation Sampling kaoga, mis on ajendatud hiljutisest tekstist 3D sünteesi alal tehtud tööst.
Genereeritud vektorite näide
Vaadake värskelt loodud SVG galeriid siin.
Vektorgraafika on väike, kuid säilitab oma teravuse mis tahes suurusele skaleerides. Berkeley teadlased parandavad vektorgraafika optimeerimiseks Score Distillation Sampling'i põhjal pildi-teksti kadu. DiffVG diferentseeritav SVG renderdaja, mida VectorFusion kasutab, teeb võimalikuks pöördvisuaalid.
Lisaks võimaldab VectorFusion mitmeastmelist konfiguratsiooni, mis on tõhusam ja kvaliteetsem. See meetod algab rasterproovide võtmisega tekstist pildiks difusioonimudel kutsutud Stable Diffusion. Seejärel jälgib VectorFusion proove automaatselt LIVE abil. Nendel näidistel pole aga sageli detaile, need on igavad või neid on vektorgraafikaga raske kohandada. Suurendage erksust ja teksti ühtlust Score Destillation Sampling abil.
VectorFusion suudab toota vanade videomängude stiilis pikslite kunsti, piirates SVG-teed ruudustiku ruutudega.
Seda lähenemisviisi on lihtne laiendada, et toetada tekstist visandiks genereerimist. Selleks, et õppida tundma abstraktset joont, mis kujutab täpselt kasutaja esitatud teksti, joonistame esmalt 16 juhuslikult valitud tõmmet. Seejärel optimeerime oma varjatud Score Destillation Sampling Kadu.
Loe seotud artikleid:
Kaebused
Vastavalt Usaldusprojekti juhised, pange tähele, et sellel lehel esitatud teave ei ole mõeldud ega tohiks tõlgendada kui juriidilist, maksu-, investeerimis-, finants- või muud nõuannet. Oluline on investeerida ainult seda, mida saate endale lubada kaotada, ja kahtluste korral küsida sõltumatut finantsnõu. Lisateabe saamiseks soovitame vaadata nõudeid ja tingimusi ning väljaandja või reklaamija pakutavaid abi- ja tugilehti. MetaversePost on pühendunud täpsele ja erapooletule aruandlusele, kuid turutingimusi võidakse ette teatamata muuta.
Umbes Autor
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
Veel artikleid
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
