TextMesh: ใหม่ Stable Diffusion- โมเดล Text-to-3D จาก Google
ในบทสรุป
TextMesh เป็นงาน text-to-3D ใหม่จาก Google ที่ปรับปรุงวิธีการใช้ที่ทันสมัยในปัจจุบัน Stable Diffusion เพื่อสร้างมุมต่างๆ ของพรอมต์พื้นฐานเดียวกัน (ภาพ 2 มิติ) จากนั้นจึงประกอบตาข่าย 3 มิติโดยใช้ NeRF
เมื่อเร็ว ๆ นี้ ความสามารถในการสร้างภาพ 2 มิติจากข้อความแจ้งประสบความสำเร็จอย่างมากเนื่องจากการทำงานของแบบจำลองการสร้างภาพแบบกระจาย โมเดลเหล่านี้มีความสามารถสูงในการสร้างตัวอย่างภาพคุณภาพสูงเมื่อได้รับข้อความ ทำให้สามารถเชื่อมต่อข้อความเป็นรูปภาพได้ง่าย จากความก้าวหน้าเหล่านี้ในด้านการสร้างภาพ 2 มิติ คำถามใหญ่ในอุตสาหกรรมนี้คือเป็นไปได้หรือไม่ที่จะใช้โมเดลการแพร่กระจายที่คล้ายกันเพื่อสร้างโมเดล 3 มิติจากข้อความ
และตอนนี้ Google ได้เปิดตัววิธีการแปลงข้อความเป็น 3 มิติแบบใหม่ด้วยชื่อที่ทันสมัย ข้อความเมช. วิธีนี้สัญญาว่าจะปรับปรุงแนวทางที่ทันสมัยในปัจจุบัน Stable Diffusionตาม โมเดลข้อความเป็น 3 มิติ รุ่น. ที่แกนหลัก มุมต่างๆ ถูกสร้างขึ้นโดยการป้อนอินพุต 2D พื้นฐานเข้าไปในโมเดล จากนั้นผลลัพธ์จะถูกประมวลผลและหลอมรวมเป็นตาข่าย 3 มิติโดยใช้แนวทาง Neural Radiance Fields (NeRF)
ที่แนะนำ: คู่มือวิศวกรรมขั้นสูงสุดพร้อมท์ปี 2023: |
ข้อได้เปรียบของแนวทางใหม่นี้เหนือ DreamFusion และ CLIPMesh ที่กำลังเป็นที่นิยมอยู่ในปัจจุบัน ที่สำคัญที่สุดคือเอาต์พุตที่เป็นมิตรต่อผู้ใช้ แทนที่จะใช้รูปแบบ NeRF ที่ท้าทาย TextMesh ให้ตาข่าย 3 มิติพร้อมพื้นผิว จึงทำให้นำไปใช้กับการใช้งานในโลกแห่งความเป็นจริงได้มากขึ้น นอกจากนี้ แนวทางนี้ยังช่วยหลีกเลี่ยงเอฟเฟ็กต์ความอิ่มตัวของสีสูงที่พบได้บ่อยในรุ่นอื่นๆ และจัดการเพื่อเพิ่มรายละเอียด
พื้นที่ งานโมเดล โดยสร้างตาข่าย 3 มิติจากภาพอินพุตด้วยความช่วยเหลือของ NeRF จากนั้นผลลัพธ์จะผ่านเฟรมเวิร์ก SDF (Signed Distance Fields) เพื่อปรับแต่งพื้นผิวเพิ่มเติม ปรับปรุงความชัดเจนโดยรวมของตาข่ายเอาต์พุต ไม่ต้องพูดถึง เฟรมเวิร์กของ SDF ช่วยในการหลีกเลี่ยงเอฟเฟกต์ความอิ่มตัวเกินที่ 3D อื่น ๆ โมเดล มักจะประสบจาก.
ตาข่าย 3 มิติที่สร้างขึ้นเป็นตัวอย่าง
วิธีการนี้ใช้ประโยชน์จากความสำเร็จของโมเดล DiG และขยายเครือข่าย NeRF ให้อิงตามแกนหลักของ SDF สิ่งนี้สร้างความสามารถในการแยกตาข่าย 3 มิติที่ดีขึ้นและตาข่าย 3 มิติที่ดูสมจริงมากขึ้นเมื่อเทียบกับวิธีการที่กล่าวถึงก่อนหน้านี้
ผลลัพธ์จากการใช้ TextMesh นั้นน่าเชื่ออย่างยิ่ง ผู้เขียนยังให้ลิงก์ไปยังรูปภาพของกระรอกที่สร้างขึ้นโดยใช้แบบจำลองซึ่งน่าประทับใจไม่น้อย
TextMesh พิสูจน์ตัวเองว่าเป็นโมเดล 3 มิติใหม่ที่ปฏิวัติวงการซึ่งมีข้อได้เปรียบมากมายและสามารถสร้างตาข่าย 3 มิติที่สมจริงอย่างยิ่ง การใช้งานจะเป็นที่นิยมมากขึ้นเรื่อย ๆ ในอนาคตอันใกล้นี้
อ่านเพิ่มเติมเกี่ยวกับ AI:
ข้อจำกัดความรับผิดชอบ
สอดคล้องกับ แนวทางโครงการที่เชื่อถือได้โปรดทราบว่าข้อมูลที่ให้ไว้ในหน้านี้ไม่ได้มีจุดมุ่งหมายและไม่ควรตีความว่าเป็นคำแนะนำทางกฎหมาย ภาษี การลงทุน การเงิน หรือรูปแบบอื่นใด สิ่งสำคัญคือต้องลงทุนเฉพาะในสิ่งที่คุณสามารถที่จะสูญเสียได้ และขอคำแนะนำทางการเงินที่เป็นอิสระหากคุณมีข้อสงสัยใดๆ สำหรับข้อมูลเพิ่มเติม เราขอแนะนำให้อ้างอิงข้อกำหนดและเงื่อนไขตลอดจนหน้าช่วยเหลือและสนับสนุนที่ผู้ออกหรือผู้ลงโฆษณาให้ไว้ MetaversePost มุ่งมั่นที่จะรายงานที่ถูกต้องและเป็นกลาง แต่สภาวะตลาดอาจมีการเปลี่ยนแปลงได้โดยไม่ต้องแจ้งให้ทราบล่วงหน้า
เกี่ยวกับผู้เขียน
Damir เป็นหัวหน้าทีม ผู้จัดการผลิตภัณฑ์ และบรรณาธิการที่ Metaverse Postซึ่งครอบคลุมหัวข้อต่างๆ เช่น AI/ML, AGI, LLMs, Metaverse และ Web3- สาขาที่เกี่ยวข้อง บทความของเขาดึงดูดผู้ชมจำนวนมากกว่าล้านคนทุกเดือน ดูเหมือนว่าเขาจะเป็นผู้เชี่ยวชาญที่มีประสบการณ์ 10 ปีในด้าน SEO และการตลาดดิจิทัล Damir ได้รับการกล่าวถึงใน Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto และสิ่งพิมพ์อื่น ๆ เขาเดินทางไปมาระหว่างสหรัฐอาหรับเอมิเรตส์ ตุรกี รัสเซีย และ CIS ในฐานะคนเร่ร่อนทางดิจิทัล Damir สำเร็จการศึกษาระดับปริญญาตรีสาขาฟิสิกส์ ซึ่งเขาเชื่อว่าทำให้เขามีทักษะการคิดเชิงวิพากษ์ที่จำเป็นต่อการประสบความสำเร็จในภูมิทัศน์ที่เปลี่ยนแปลงตลอดเวลาของอินเทอร์เน็ต
บทความอื่น ๆDamir เป็นหัวหน้าทีม ผู้จัดการผลิตภัณฑ์ และบรรณาธิการที่ Metaverse Postซึ่งครอบคลุมหัวข้อต่างๆ เช่น AI/ML, AGI, LLMs, Metaverse และ Web3- สาขาที่เกี่ยวข้อง บทความของเขาดึงดูดผู้ชมจำนวนมากกว่าล้านคนทุกเดือน ดูเหมือนว่าเขาจะเป็นผู้เชี่ยวชาญที่มีประสบการณ์ 10 ปีในด้าน SEO และการตลาดดิจิทัล Damir ได้รับการกล่าวถึงใน Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto และสิ่งพิมพ์อื่น ๆ เขาเดินทางไปมาระหว่างสหรัฐอาหรับเอมิเรตส์ ตุรกี รัสเซีย และ CIS ในฐานะคนเร่ร่อนทางดิจิทัล Damir สำเร็จการศึกษาระดับปริญญาตรีสาขาฟิสิกส์ ซึ่งเขาเชื่อว่าทำให้เขามีทักษะการคิดเชิงวิพากษ์ที่จำเป็นต่อการประสบความสำเร็จในภูมิทัศน์ที่เปลี่ยนแปลงตลอดเวลาของอินเทอร์เน็ต