TextMesh: جدید Stable Diffusionمدل مبتنی بر متن به سه بعدی از گوگل
به طور خلاصه
TextMesh یک کار جدید از Google برای تبدیل متن به سه بعدی است که رویکرد امروزی استفاده را بهبود می بخشد Stable Diffusion برای تولید زوایای مختلف از همان اعلان اولیه (تصویر دو بعدی) و سپس یک مش 2 بعدی از آن با استفاده از NeRF مونتاژ می شود.
اخیراً توانایی تولید تصاویر دوبعدی از اعلان‌های متنی به دلیل کار مدل‌های تولید تصویر پراکنده موفقیت‌های چشمگیری داشته است. این مدل‌ها توانایی بالایی در تولید نمونه‌های تصویری باکیفیت با توجه به یک پیام متنی دارند که امکان ایجاد یک رابط متن به تصویر ساده را فراهم می‌کند. با تکیه بر این پیشرفت ها در زمینه تولید تصاویر دو بعدی، سوال بزرگ در این صنعت این است که آیا می توان از مدل های انتشار مشابه برای تولید مدل های سه بعدی از متن استفاده کرد؟
و اکنون گوگل روش جدیدی را برای تبدیل متن به سه بعدی با نامی زیبا معرفی کرده است TextMesh. این روش نوید بهبود رویکرد مد روز را می دهد Stable Diffusionبر اساس مدل تبدیل متن به سه بعدی نسل. در هسته آن، زوایای متعددی با وارد کردن ورودی دو بعدی اولیه به مدل ایجاد می‌شود. سپس نتایج پردازش شده و با استفاده از رویکرد میدان‌های تابشی عصبی (NeRF) در یک شبکه سه‌بعدی جذب می‌شوند.
| توصیه می شود: Prompt Engineering Ultimate Guide 2023: |
مزایای این رویکرد نوآورانه نسبت به DreamFusion و CLIPMesh در حال حاضر مرسوم، مهمتر از همه، خروجی کاربر پسند است. به جای استفاده از فرمت چالش برانگیز NeRF، TextMesh مش سه بعدی را با بافت ها فراهم می کند، بنابراین آن را برای استفاده در دنیای واقعی بسیار کاربردی تر می کند. علاوه بر این، این رویکرد از اثر اشباع بالای مدل‌های دیگر اجتناب می‌کند و جزئیات را افزایش می‌دهد.
La مدل کار می کند ابتدا یک شبکه سه بعدی از یک تصویر ورودی با کمک NeRF تشکیل داد. سپس نتایج از چارچوب SDF (Signed Distance Fields) عبور می کند تا بافت را اصلاح کند و وضوح کلی مش خروجی را بهبود بخشد. ناگفته نماند، چارچوب SDF به جلوگیری از اثر اشباع بیش از حد سه بعدی دیگر کمک می کند مدل معمولا از
مش های سه بعدی ایجاد شده به عنوان نمونه
این رویکرد از موفقیت مدل‌های DiG بهره می‌برد و شبکه‌های NeRF را بر اساس ستون فقرات SDF توسعه می‌دهد. این قابلیت‌های استخراج مش سه‌بعدی بهبود یافته و مش‌های سه‌بعدی بسیار واقعی‌تر را در مقایسه با روش‌های مورد بحث قبلی ایجاد می‌کند.
نتایج استفاده از TextMesh بسیار قانع کننده است. نویسندگان حتی پیوندی به تصویر یک سنجاب ایجاد شده با مدل خود ارائه می دهند که چیزی کمتر از چشمگیر نیست.
TextMesh خود را ثابت می کند که یک مدل سه بعدی انقلابی است که مزایای فراوانی را ارائه می دهد و می تواند مش های سه بعدی بسیار واقعی را تولید کند. استفاده از آن در آینده نزدیک محبوبیت بیشتری پیدا خواهد کرد.
درباره هوش مصنوعی بیشتر بخوانید:
سلب مسئولیت
در خط با دستورالعمل های پروژه اعتماد، لطفاً توجه داشته باشید که اطلاعات ارائه شده در این صفحه به عنوان مشاوره حقوقی، مالیاتی، سرمایه گذاری، مالی یا هر شکل دیگری در نظر گرفته نشده است و نباید تفسیر شود. مهم است که فقط در موردی سرمایه گذاری کنید که توانایی از دست دادن آن را دارید و در صورت شک و تردید به دنبال مشاوره مالی مستقل باشید. برای کسب اطلاعات بیشتر، پیشنهاد می کنیم به شرایط و ضوابط و همچنین صفحات راهنمایی و پشتیبانی ارائه شده توسط صادرکننده یا تبلیغ کننده مراجعه کنید. MetaversePost متعهد به گزارش دقیق و بی طرفانه است، اما شرایط بازار بدون اطلاع قبلی ممکن است تغییر کند.
درباره نویسنده
Damir رهبر تیم، مدیر محصول و سردبیر در است Metaverse Post، موضوعاتی مانند AI/ML، AGI، LLMs، Metaverse و Web3- زمینه های مرتبط مقالات او هر ماه مخاطبان زیادی از بیش از یک میلیون کاربر را جذب می کند. به نظر می رسد او یک متخصص با 10 سال تجربه در سئو و بازاریابی دیجیتال است. دمیر در Mashable, Wired, ذکر شده است. Cointelegraph، نیویورکر، Inside.com، Entrepreneur، BeInCrypto، و انتشارات دیگر. او بین امارات متحده عربی، ترکیه، روسیه و کشورهای مستقل مشترک المنافع به عنوان یک عشایر دیجیتال سفر می کند. دمیر مدرک لیسانس خود را در فیزیک گرفت که به اعتقاد او مهارت های تفکر انتقادی لازم برای موفقیت در چشم انداز دائماً در حال تغییر اینترنت را به او داده است.
مقالات بیشتر
Damir رهبر تیم، مدیر محصول و سردبیر در است Metaverse Post، موضوعاتی مانند AI/ML، AGI، LLMs، Metaverse و Web3- زمینه های مرتبط مقالات او هر ماه مخاطبان زیادی از بیش از یک میلیون کاربر را جذب می کند. به نظر می رسد او یک متخصص با 10 سال تجربه در سئو و بازاریابی دیجیتال است. دمیر در Mashable, Wired, ذکر شده است. Cointelegraph، نیویورکر، Inside.com، Entrepreneur، BeInCrypto، و انتشارات دیگر. او بین امارات متحده عربی، ترکیه، روسیه و کشورهای مستقل مشترک المنافع به عنوان یک عشایر دیجیتال سفر می کند. دمیر مدرک لیسانس خود را در فیزیک گرفت که به اعتقاد او مهارت های تفکر انتقادی لازم برای موفقیت در چشم انداز دائماً در حال تغییر اینترنت را به او داده است.
