TextMesh: Yeni Bir Stable DiffusionGoogle'dan Tabanlı Metinden 3B Modele Dönüştürme
Kısaca
TextMesh, Google'ın artık moda olan kullanım yaklaşımını geliştiren yeni bir metinden 3B'ye dönüştürme çalışmasıdır. Stable Diffusion aynı temel istemin (2B resim) farklı açılarını oluşturmak için ve ardından NeRF kullanılarak bundan bir 3B ağ birleştirilir.
Son zamanlarda, metin istemlerinden 2B görüntüler oluşturma yeteneği, dağınık görüntü oluşturma modellerinin çalışması nedeniyle büyük başarı elde etti. Bu modeller, bir metin istemi verildiğinde yüksek kaliteli görüntü örnekleri üretme konusunda oldukça yeteneklidir ve basit bir metinden görüntüye arayüz sağlar. 2B görüntü oluşturma alanındaki bu ilerlemelere dayanarak, bu sektördeki büyük soru, metinden 3B modeller oluşturmak için benzer difüzyon modellerinin uygulanmasının mümkün olup olmadığıdır.
Ve şimdi Google, şık adıyla yeni bir metinden 3B'ye dönüştürme yöntemini tanıttı. metin ağı. Bu yöntem, şimdi moda olan yaklaşımı geliştirmeyi vaat ediyor. Stable Diffusiontabanlı metinden 3B modele nesil. Özünde, modele temel bir 2B girdi beslenerek çoklu açılar oluşturulur. Daha sonra sonuçlar işlenir ve Nöral Parlaklık Alanları (NeRF) yaklaşımı kullanılarak bir 3D ağa asimile edilir.
| Önerilen: Hızlı Mühendislik Nihai Kılavuzu 2023: |
Bu yenilikçi yaklaşımın şu anda popüler olan DreamFusion ve CLIPMesh'e göre avantajları, her şeyden önce, kullanıcı dostu çıktılardır. Zorlu NeRF formatını kullanmak yerine TextMesh, dokularla birlikte 3D ağ sağlar ve böylece onu gerçek dünyadaki kullanımlar için çok daha uygulanabilir hale getirir. Ek olarak, yaklaşım diğer modellerin sıklıkla karşılaşılan yüksek doygunluk etkisinden kaçınır ve ayrıntıları artırmayı başarır.
The modeli çalışır önce NeRF yardımıyla bir giriş görüntüsünden bir 3B ağ oluşturarak. Sonuçlar daha sonra dokuyu daha da hassaslaştırmak için SDF (İmzalı Mesafe Alanları) çerçevesinden geçerek çıktı ağının genel netliğini geliştirir. Bahsetmemek gerekirse, SDF çerçevesi, diğer 3B'nin aşırı doygunluk etkisinden kaçınmaya yardımcı olur. modelleri genellikle muzdariptir.
Örnek olarak oluşturulan 3B kafesler
Bu yaklaşım, DiG modellerinin başarısından yararlanır ve NeRF ağlarını bir SDF omurgasına dayanacak şekilde genişletir. Bu, daha önce tartışılan yöntemlere kıyasla gelişmiş 3B ağ çıkarma yetenekleri ve çok daha gerçekçi görünen 3B ağlar üretir.
TextMesh kullanmanın sonuçları son derece ikna edici. Yazarlar, modelleri kullanılarak yaratılan ve etkileyiciden daha az bir şey olmayan bir sincap resminin bağlantısını bile veriyorlar.
TextMesh, çok sayıda avantaj sunan ve son derece gerçekçi 3B kafesler üretebilen devrim niteliğinde yeni bir 3B model olduğunu kanıtlıyor. Kullanımı yakın gelecekte giderek daha popüler hale gelecektir.
AI hakkında daha fazlasını okuyun:
Feragatname
Doğrultusunda Trust Project yönergeleri, lütfen bu sayfada sağlanan bilgilerin hukuki, vergi, yatırım, finansal veya başka herhangi bir tavsiye niteliğinde olmadığını ve bu şekilde yorumlanmaması gerektiğini unutmayın. Yalnızca kaybetmeyi göze alabileceğiniz kadar yatırım yapmak ve herhangi bir şüpheniz varsa bağımsız finansal tavsiye almak önemlidir. Daha fazla bilgi için şartlar ve koşulların yanı sıra kartı veren kuruluş veya reklamveren tarafından sağlanan yardım ve destek sayfalarına bakmanızı öneririz. MetaversePost doğru, tarafsız raporlamaya kendini adamıştır, ancak piyasa koşulları önceden haber verilmeksizin değiştirilebilir.
Yazar hakkında
Damir şu anda ekip lideri, ürün yöneticisi ve editördür: Metaverse Post, AI/ML, AGI, LLM'ler, Metaverse ve Web3-İlgili alanlar. Makaleleri, her ay bir milyondan fazla kullanıcıdan oluşan büyük bir kitleyi kendine çekiyor. SEO ve dijital pazarlama konusunda 10 yıllık deneyime sahip bir uzman gibi görünüyor. Damir'den Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ve diğer yayınlar. Dijital bir göçebe olarak BAE, Türkiye, Rusya ve BDT arasında seyahat ediyor. Damir, kendisine internetin sürekli değişen ortamında başarılı olmak için gereken eleştirel düşünme becerilerini verdiğine inandığı fizik alanında lisans derecesi aldı.
Daha fazla haber
Damir şu anda ekip lideri, ürün yöneticisi ve editördür: Metaverse Post, AI/ML, AGI, LLM'ler, Metaverse ve Web3-İlgili alanlar. Makaleleri, her ay bir milyondan fazla kullanıcıdan oluşan büyük bir kitleyi kendine çekiyor. SEO ve dijital pazarlama konusunda 10 yıllık deneyime sahip bir uzman gibi görünüyor. Damir'den Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ve diğer yayınlar. Dijital bir göçebe olarak BAE, Türkiye, Rusya ve BDT arasında seyahat ediyor. Damir, kendisine internetin sürekli değişen ortamında başarılı olmak için gereken eleştirel düşünme becerilerini verdiğine inandığı fizik alanında lisans derecesi aldı.
