TextMesh: Baru Stable DiffusionModel Teks-ke-3D Berbasis Dari Google
Singkatnya
TextMesh adalah karya teks-ke-3D baru dari Google yang meningkatkan pendekatan penggunaan yang sekarang modis Stable Diffusion untuk menghasilkan sudut yang berbeda dari prompt dasar yang sama (gambar 2D) dan kemudian jaring 3D dirakit dari ini menggunakan NeRF.
Baru-baru ini, kemampuan untuk menghasilkan gambar 2D dari petunjuk teks telah terlihat sukses besar karena karya model pembuatan gambar difusif. Model ini sangat mampu menghasilkan sampel gambar berkualitas tinggi dengan prompt teks, memungkinkan antarmuka teks-ke-gambar yang sederhana. Berdasarkan kemajuan di bidang pembuatan gambar 2D ini, pertanyaan besar dalam industri ini adalah apakah mungkin menerapkan model difusi serupa untuk menghasilkan model 3D dari teks.
Dan sekarang Google telah memperkenalkan metode teks-ke-3D baru dengan nama yang ramping TeksMesh. Metode ini menjanjikan peningkatan pendekatan yang kini menjadi mode Stable DiffusionBerbasis model teks-ke-3D generasi. Pada intinya, berbagai sudut dihasilkan dengan memasukkan input 2D dasar ke dalam model. Kemudian hasilnya diolah dan diasimilasi menjadi 3D mesh menggunakan pendekatan Neural Radiance Fields (NeRF).
| Rekomendasi: Panduan Utama Rekayasa Cepat 2023: |
Keuntungan dari pendekatan inovatif ini dibandingkan dengan DreamFusion dan CLIPMesh yang trendi saat ini adalah, terutama, keluaran yang mudah digunakan. Daripada menggunakan format NeRF yang menantang, TextMesh menyediakan mesh 3D dengan tekstur, sehingga membuatnya lebih dapat diterapkan untuk penggunaan di dunia nyata. Selain itu, pendekatan ini menghindari efek saturasi tinggi yang sering ditemui dari model lain dan berhasil meningkatkan detail.
Grafik karya model dengan terlebih dahulu membentuk jaring 3D dari gambar masukan dengan bantuan NeRF. Hasilnya kemudian melewati kerangka kerja SDF (Signed Distance Fields) untuk menyempurnakan tekstur lebih lanjut, meningkatkan kejernihan jaring keluaran secara keseluruhan. Belum lagi, kerangka SDF membantu menghindari efek oversaturation yang 3D lainnya model biasanya menderita.
Jaring 3D dibuat sebagai contoh
Pendekatan ini memanfaatkan kesuksesan model DiG dan memperluas jaringan NeRF agar didasarkan pada tulang punggung SDF. Ini menghasilkan kemampuan ekstraksi mesh 3D yang lebih baik dan mesh 3D yang tampak lebih realistis dibandingkan dengan metode yang dibahas sebelumnya.
Hasil dari penggunaan TextMesh sangat meyakinkan. Penulis bahkan memberikan tautan ke gambar tupai yang dibuat menggunakan model mereka, yang sangat mengesankan.
TextMesh membuktikan dirinya sebagai model 3D baru yang revolusioner yang menawarkan banyak keuntungan dan dapat menghasilkan jaring 3D yang sangat realistis. Penggunaannya pasti akan menjadi semakin populer dalam waktu dekat.
Baca lebih lanjut tentang AI:
Penolakan tanggung jawab
Sejalan dengan Percayai pedoman Proyek, harap dicatat bahwa informasi yang diberikan pada halaman ini tidak dimaksudkan untuk dan tidak boleh ditafsirkan sebagai nasihat hukum, pajak, investasi, keuangan, atau bentuk nasihat lainnya. Penting untuk hanya menginvestasikan jumlah yang mampu Anda tanggung kerugiannya dan mencari nasihat keuangan independen jika Anda ragu. Untuk informasi lebih lanjut, kami menyarankan untuk merujuk pada syarat dan ketentuan serta halaman bantuan dan dukungan yang disediakan oleh penerbit atau pengiklan. MetaversePost berkomitmen terhadap pelaporan yang akurat dan tidak memihak, namun kondisi pasar dapat berubah tanpa pemberitahuan.
Tentang Penulis
Damir adalah pemimpin tim, manajer produk, dan editor di Metaverse Post, mencakup topik seperti AI/ML, AGI, LLM, Metaverse, dan Web3-bidang terkait. Artikelnya menarik lebih dari satu juta pengguna setiap bulan. Dia tampaknya ahli dengan pengalaman 10 tahun dalam SEO dan pemasaran digital. Damir telah disebutkan dalam Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, dan publikasi lainnya. Dia melakukan perjalanan antara UEA, Turki, Rusia, dan CIS sebagai pengembara digital. Damir memperoleh gelar sarjana dalam bidang fisika, yang menurutnya telah memberinya keterampilan berpikir kritis yang diperlukan untuk berhasil dalam lanskap internet yang selalu berubah.
lebih artikel
Damir adalah pemimpin tim, manajer produk, dan editor di Metaverse Post, mencakup topik seperti AI/ML, AGI, LLM, Metaverse, dan Web3-bidang terkait. Artikelnya menarik lebih dari satu juta pengguna setiap bulan. Dia tampaknya ahli dengan pengalaman 10 tahun dalam SEO dan pemasaran digital. Damir telah disebutkan dalam Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, dan publikasi lainnya. Dia melakukan perjalanan antara UEA, Turki, Rusia, dan CIS sebagai pengembara digital. Damir memperoleh gelar sarjana dalam bidang fisika, yang menurutnya telah memberinya keterampilan berpikir kritis yang diperlukan untuk berhasil dalam lanskap internet yang selalu berubah.
