Futureverse تكشف عن JEN-1: نموذج ذكاء اصطناعي ثوري لتوليد تحويل النص إلى موسيقى في الوقت الفعلي
في سطور
قامت شركة Futureverse ، وهي شركة رائدة في مجال الذكاء الاصطناعي وتكنولوجيا metaverse ، بتقديم JEN-1 ، وهو نموذج ذكاء اصطناعي مصمم لتوليد تحويل النص إلى موسيقى.
يمثل JEN-1 قفزة ملحوظة إلى الأمام في الذكاء الاصطناعي للموسيقى من خلال تحقيق مستويات غير مسبوقة من محاذاة النص والموسيقى وجودة الموسيقى ، كل ذلك مع الحفاظ على كفاءة حاسوبية ملحوظة.
أعلنت شركة Futureverse ، وهي شركة تكنولوجيا ومحتوى للذكاء الاصطناعي و metaverse ، عن إطلاق JEN-1 ، وهو نموذج ذكاء اصطناعي جديد لتوليد تحويل النص إلى موسيقى. يُعد JEN-1 تقدمًا كبيرًا في مجال الذكاء الاصطناعي للموسيقى ، حيث إنه النموذج الأول الذي يحقق أداءً متطورًا في محاذاة الموسيقى النصية وجودة الموسيقى مع الحفاظ على الكفاءة الحسابية.
"نقوم بتقييم JEN-1 على نطاق واسع مقابل أحدث خطوط الأساس عبر المقاييس الموضوعية والتقييمات البشرية. تظهر النتائج أن JEN-1 ينتج موسيقى ذات جودة أعلى (85.7 / 100) مقارنة بأفضل الطرق الحالية (83.8 / 100) ، "كتب Futureverse.
يعد إنشاء الموسيقى من النص أمرًا صعبًا بسبب الطبيعة المعقدة للترتيبات الموسيقية والحاجة إلى معدل أخذ عينات مرتفع. وفق ورقة فيوتشرفيرس، يمكن لـ JEN-1 التغلب على هذه التحديات لأن نموذج الانتشار الخاص بها يعتمد على التدريب الانحدار الذاتي وغير الانحدار الذاتي. يسمح هذا لـ JEN-1 بتوليد موسيقى واقعية وخلاقة.
نظرًا لكفاءته الحسابية ، من الممكن استخدام JEN-1 لإنشاء موسيقى في الوقت الفعلي ، مما يفتح إمكانيات جديدة لإنتاج الموسيقى والأداء الحي والواقع الافتراضي.
يستخدم نموذج الذكاء الاصطناعي جهاز تشفير تلقائي خاص و نموذج الانتشار لإنتاج صوت استريو مفصل مباشرة بمعدل عينات مرتفع يبلغ 48 كيلو هرتز. علاوة على ذلك، يتجنب JEN-1 فقدان الجودة المعتاد عند تحويل ميزات الصوت. يتم تدريب النموذج على مهام متعددة، بما في ذلك إنشاء الموسيقى، واستمرار التسلسل الموسيقي، وملء الأجزاء المفقودة، مما يجعله متعدد الاستخدامات.
يجمع JEN-1 أيضًا بذكاء بين أساليب الانحدار الذاتي وغير الانحدار الذاتي لموازنة المفاضلة بين التقاط التبعيات في موسيقى وتوليدها بكفاءة. بالإضافة إلى ذلك، يستخدم نموذج الذكاء الاصطناعي تقنيات التعلم الذكية ويتم تدريبه على التعامل مع الجوانب الموسيقية المختلفة في وقت واحد.
JEN-1 مقابل MusicLM و MusicGen ونماذج الذكاء الاصطناعي الأخرى
يقارن Futureverse JEN-1 بأحدث الموديلات الحالية ، مثل MusicLM من Google و MusicGen من Meta ، ويوضح أن منهجه ينتج نتائج أفضل في الإخلاص والواقعية.
اعتمد التقييم على أداء طرز مختلفة في مجموعة اختبار MusicCaps ، وهي مجموعة بيانات من أزواج الموسيقى والنص. استخدمت Futureverse كلاً من المقاييس الكمية والنوعية لتقييم النماذج. تضمنت المقاييس الكمية درجة FAD (الإخلاص - الوعي - فك التشابك) ودرجة CLAP (عقوبات الاستمرارية والشذوذ المحلي). تضمنت المقاييس النوعية التقييمات البشرية لجودة ومواءمة الموسيقى المولدة.
أظهرت النتائج أن JEN-1 تفوق على النماذج الأخرى في المقاييس الكمية والنوعية. حصل JEN-1 على أعلى درجات FAD و CLAP وحصل على أعلى الدرجات من المقيّمين البشريين. بالإضافة إلى ذلك ، كان JEN-1 أكثر كفاءة من الناحية الحسابية من النماذج الأخرى ، مع 22.6٪ فقط من معلمات MusicGen و 57.7٪ من معلمات Noise2Music.
JEN-1 هي علامة على الإمكانات المتزايدة للذكاء الاصطناعي في صناعة الموسيقى. يستخدم الذكاء الاصطناعي بالفعل لإنشاء الموسيقى ، لكن JEN-1 يعد خطوة مهمة إلى الأمام. إنه النموذج الأول الذي يحقق أداءً متطورًا على كل من المقاييس الكمية والنوعية ، كما أنه أكثر كفاءة من الناحية الحسابية من النماذج السابقة.
اقرأ أكثر:
- أفضل 20 نموذجًا لتحويل النص إلى موسيقى بالذكاء الاصطناعي مع مطالبات من Mubert
- أعلنت Google AI عن أول برنامج لتحويل النص إلى موسيقى AudioLM
- MusicLM: نموذج AI جديد لتحويل النص إلى موسيقى ومن صورة إلى موسيقى من Google
- تنضم Futureverse إلى القوات مع Outlier Ventures لبرنامج مسرع معسكر Futureverse Base
إخلاء مسؤولية
تتماشى مع المبادئ التوجيهية لمشروع الثقةيرجى ملاحظة أن المعلومات المقدمة في هذه الصفحة ليس المقصود منها ولا ينبغي تفسيرها على أنها نصيحة قانونية أو ضريبية أو استثمارية أو مالية أو أي شكل آخر من أشكال المشورة. من المهم أن تستثمر فقط ما يمكنك تحمل خسارته وأن تطلب مشورة مالية مستقلة إذا كانت لديك أي شكوك. لمزيد من المعلومات، نقترح الرجوع إلى الشروط والأحكام بالإضافة إلى صفحات المساعدة والدعم المقدمة من جهة الإصدار أو المعلن. MetaversePost تلتزم بتقارير دقيقة وغير متحيزة، ولكن ظروف السوق عرضة للتغيير دون إشعار.
نبذة عن الكاتب
Agne هي صحفية تغطي أحدث الاتجاهات والتطورات في metaverse و AI و Web3 صناعات ل Metaverse Post. دفعها شغفها بسرد القصص إلى إجراء العديد من المقابلات مع خبراء في هذه المجالات، وتسعى دائمًا للكشف عن قصص مثيرة وجذابة. حصلت أغني على درجة البكالوريوس في الأدب ولديها خلفية واسعة في الكتابة حول مجموعة واسعة من المواضيع بما في ذلك السفر والفن والثقافة. كما تطوعت كمحررة في منظمة حقوق الحيوان، حيث ساعدت في رفع مستوى الوعي حول قضايا رعاية الحيوان. اتصل بها على [البريد الإلكتروني محمي].
المزيد من المقالات
Agne هي صحفية تغطي أحدث الاتجاهات والتطورات في metaverse و AI و Web3 صناعات ل Metaverse Post. دفعها شغفها بسرد القصص إلى إجراء العديد من المقابلات مع خبراء في هذه المجالات، وتسعى دائمًا للكشف عن قصص مثيرة وجذابة. حصلت أغني على درجة البكالوريوس في الأدب ولديها خلفية واسعة في الكتابة حول مجموعة واسعة من المواضيع بما في ذلك السفر والفن والثقافة. كما تطوعت كمحررة في منظمة حقوق الحيوان، حيث ساعدت في رفع مستوى الوعي حول قضايا رعاية الحيوان. اتصل بها على [البريد الإلكتروني محمي].
