Futureverse เปิดตัว JEN-1: โมเดล AI ปฏิวัติวงการสำหรับการสร้างข้อความเป็นเพลงแบบเรียลไทม์
ในบทสรุป
Futureverse บริษัทเทคโนโลยี AI และ metaverse ที่บุกเบิก ได้เปิดตัว JEN-1 ซึ่งเป็นโมเดล AI ที่ออกแบบมาสำหรับการสร้างข้อความเป็นเพลง
JEN-1 แสดงถึงก้าวกระโดดที่โดดเด่นในด้าน AI ดนตรีโดยบรรลุระดับที่ไม่เคยมีมาก่อนของการจัดตำแหน่งข้อความและดนตรีและคุณภาพเพลง ทั้งหมดนี้ยังคงประสิทธิภาพการคำนวณที่โดดเด่น
Futureverse บริษัทเทคโนโลยีและเนื้อหา AI และ metaverse ได้ประกาศเปิดตัว JEN-1 ซึ่งเป็นโมเดล AI ใหม่สำหรับการสร้างข้อความเป็นเพลง JEN-1 เป็นความก้าวหน้าครั้งสำคัญใน AI เพลง เนื่องจากเป็นรุ่นแรกที่ได้รับประสิทธิภาพที่ล้ำสมัยในการจัดตำแหน่งข้อความและคุณภาพเสียงดนตรี ในขณะที่ยังคงประสิทธิภาพการคำนวณไว้
“เราประเมิน JEN-1 อย่างกว้างขวางโดยเทียบกับพื้นฐานที่ล้ำสมัยในตัวชี้วัดวัตถุประสงค์และการประเมินโดยมนุษย์ ผลลัพธ์แสดงให้เห็นว่า JEN-1 ผลิตเพลงที่มีคุณภาพสูงขึ้นอย่างเห็นได้ชัด (85.7/100) เมื่อเทียบกับวิธีที่ดีที่สุดในปัจจุบัน (83.8/100)” Futureverse เขียน
การสร้างเพลงจากข้อความเป็นเรื่องยากเนื่องจากธรรมชาติของการเรียบเรียงดนตรีที่ซับซ้อนและต้องการอัตราการสุ่มตัวอย่างสูง ตาม กระดาษของ FutureverseJEN-1 สามารถเอาชนะความท้าทายเหล่านี้ได้เนื่องจากแบบจำลองการแพร่กระจายนั้นขึ้นอยู่กับการฝึกแบบออโตรีเกรสซีฟและไม่ใช่ออโตรีเกรสซีฟ สิ่งนี้ทำให้ JEN-1 สร้างเพลงที่สมจริงและสร้างสรรค์
เนื่องจากประสิทธิภาพในการคำนวณ จึงสามารถใช้ JEN-1 เพื่อสร้างเพลงแบบเรียลไทม์ ซึ่งเปิดโอกาสใหม่ๆ สำหรับการผลิตเพลง การแสดงสด และความเป็นจริงเสมือน
โมเดล AI ใช้ตัวเข้ารหัสอัตโนมัติแบบพิเศษและ แบบจำลองการแพร่กระจาย เพื่อสร้างเสียงสเตอริโอที่มีรายละเอียดโดยตรงที่อัตราการสุ่มตัวอย่างสูงถึง 48kHz นอกจากนี้ JEN-1 ยังหลีกเลี่ยงการสูญเสียคุณภาพตามปกติเมื่อแปลงคุณสมบัติเสียง โมเดลนี้ได้รับการฝึกฝนในหลายงาน รวมถึงการสร้างเพลง ลำดับเพลงต่อเนื่อง และการเติมเต็มส่วนที่ขาดหายไป ทำให้มีความหลากหลาย
JEN-1 ยังผสมผสานวิธี autoregressive และ non-autoregressive อย่างชาญฉลาดเพื่อสร้างสมดุลระหว่างการแลกเปลี่ยนระหว่างการจับการพึ่งพาใน เพลง และสร้างมันขึ้นมาอย่างมีประสิทธิภาพ นอกจากนี้ โมเดล AI ยังใช้เทคนิคการเรียนรู้อันชาญฉลาดและได้รับการฝึกให้จัดการกับแง่มุมทางดนตรีต่างๆ ได้ในคราวเดียว
JEN-1 กับ MusicLM, MusicGen และโมเดล AI อื่นๆ
Futureverse เปรียบเทียบ JEN-1 กับโมเดลที่ทันสมัยในปัจจุบัน เช่น MusicLM จาก Google และ MusicGen จาก Meta และแสดงให้เห็นว่าแนวทางของมันให้ผลลัพธ์ที่ดีกว่าในด้านความเที่ยงตรงและความสมจริง
การประเมินขึ้นอยู่กับประสิทธิภาพของรุ่นต่างๆ ในชุดทดสอบ MusicCaps ซึ่งเป็นชุดข้อมูลของคู่เพลงและข้อความ Futureverse ใช้มาตรการทั้งเชิงปริมาณและเชิงคุณภาพเพื่อประเมินแบบจำลอง มาตรการเชิงปริมาณประกอบด้วยคะแนน FAD (ความเที่ยงตรง-การรับรู้-ความกระจ่าง) และคะแนน CLAP (ความต่อเนื่องและระดับท้องถิ่น-ความผิดปกติ-บทลงโทษ) มาตรการเชิงคุณภาพรวมถึงการประเมินคุณภาพและแนวเพลงที่สร้างขึ้นโดยมนุษย์
ผลการวิจัยพบว่า JEN-1 มีประสิทธิภาพเหนือกว่าแบบจำลองอื่นๆ ในด้านการวัดเชิงปริมาณและคุณภาพ JEN-1 มีคะแนน FAD และ CLAP สูงสุด และได้รับคะแนนสูงสุดจากผู้ประเมิน นอกจากนี้ JEN-1 ยังมีประสิทธิภาพในการคำนวณมากกว่ารุ่นอื่นๆ โดยมีพารามิเตอร์เพียง 22.6% ของ MusicGen และ 57.7% ของพารามิเตอร์ของ Noise2Music
JEN-1 เป็นสัญญาณของศักยภาพที่เพิ่มขึ้นของ AI ในอุตสาหกรรมเพลง AI ถูกใช้เพื่อสร้างเพลงอยู่แล้ว แต่ JEN-1 เป็นก้าวที่สำคัญ เป็นรุ่นแรกที่ได้รับประสิทธิภาพอันล้ำสมัยทั้งในด้านการวัดเชิงปริมาณและเชิงคุณภาพ และยังมีประสิทธิภาพในการคำนวณมากกว่ารุ่นก่อนหน้าอีกด้วย
อ่านเพิ่มเติม:
- ตัวอย่าง Text-to-Music ของ AI 20 อันดับแรกพร้อมคำแนะนำจาก Mubert
- Google AI ประกาศ AudioLM ตัวสร้างข้อความเป็นเพลงตัวแรก
- MusicLM: โมเดล AI แปลงข้อความเป็นเพลงและรูปภาพเป็นเพลงใหม่จาก Google
- Futureverse ผนึกกำลังกับ Outlier Ventures สำหรับโครงการ Futureverse Base Camp Accelerator
ข้อจำกัดความรับผิดชอบ
สอดคล้องกับ แนวทางโครงการที่เชื่อถือได้โปรดทราบว่าข้อมูลที่ให้ไว้ในหน้านี้ไม่ได้มีจุดมุ่งหมายและไม่ควรตีความว่าเป็นคำแนะนำทางกฎหมาย ภาษี การลงทุน การเงิน หรือรูปแบบอื่นใด สิ่งสำคัญคือต้องลงทุนเฉพาะในสิ่งที่คุณสามารถที่จะสูญเสียได้ และขอคำแนะนำทางการเงินที่เป็นอิสระหากคุณมีข้อสงสัยใดๆ สำหรับข้อมูลเพิ่มเติม เราขอแนะนำให้อ้างอิงข้อกำหนดและเงื่อนไขตลอดจนหน้าช่วยเหลือและสนับสนุนที่ผู้ออกหรือผู้ลงโฆษณาให้ไว้ MetaversePost มุ่งมั่นที่จะรายงานที่ถูกต้องและเป็นกลาง แต่สภาวะตลาดอาจมีการเปลี่ยนแปลงได้โดยไม่ต้องแจ้งให้ทราบล่วงหน้า
เกี่ยวกับผู้เขียน
Agne เป็นนักข่าวที่รายงานข่าวเกี่ยวกับแนวโน้มล่าสุดและการพัฒนาใน metaverse, AI และ Web3 อุตสาหกรรมสำหรับ Metaverse Post. ความหลงใหลในการเล่าเรื่องของเธอทำให้เธอต้องสัมภาษณ์ผู้เชี่ยวชาญในสาขาเหล่านี้หลายครั้ง โดยพยายามค้นหาเรื่องราวที่น่าตื่นเต้นและมีส่วนร่วมอยู่เสมอ แอกเน่สำเร็จการศึกษาระดับปริญญาตรีสาขาวรรณคดีและมีพื้นฐานกว้างขวางในการเขียนเกี่ยวกับหัวข้อต่างๆ มากมาย รวมถึงการท่องเที่ยว ศิลปะ และวัฒนธรรม เธอยังได้อาสาเป็นบรรณาธิการให้กับองค์กรสิทธิสัตว์ ซึ่งเธอช่วยสร้างความตระหนักรู้เกี่ยวกับปัญหาสวัสดิภาพสัตว์ ติดต่อเธอได้ที่ [ป้องกันอีเมล].
บทความอื่น ๆ
Agne เป็นนักข่าวที่รายงานข่าวเกี่ยวกับแนวโน้มล่าสุดและการพัฒนาใน metaverse, AI และ Web3 อุตสาหกรรมสำหรับ Metaverse Post. ความหลงใหลในการเล่าเรื่องของเธอทำให้เธอต้องสัมภาษณ์ผู้เชี่ยวชาญในสาขาเหล่านี้หลายครั้ง โดยพยายามค้นหาเรื่องราวที่น่าตื่นเต้นและมีส่วนร่วมอยู่เสมอ แอกเน่สำเร็จการศึกษาระดับปริญญาตรีสาขาวรรณคดีและมีพื้นฐานกว้างขวางในการเขียนเกี่ยวกับหัวข้อต่างๆ มากมาย รวมถึงการท่องเที่ยว ศิลปะ และวัฒนธรรม เธอยังได้อาสาเป็นบรรณาธิการให้กับองค์กรสิทธิสัตว์ ซึ่งเธอช่วยสร้างความตระหนักรู้เกี่ยวกับปัญหาสวัสดิภาพสัตว์ ติดต่อเธอได้ที่ [ป้องกันอีเมล].
