Futureverse از JEN-1 رونمایی کرد: مدل انقلابی هوش مصنوعی برای تولید متن به موسیقی در زمان واقعی
به طور خلاصه
Futureverse، یک شرکت پیشگام در فناوری هوش مصنوعی و متاورس، JEN-1 را معرفی کرده است، یک مدل هوش مصنوعی که برای تولید متن به موسیقی طراحی شده است.
JEN-1 نشان دهنده یک جهش قابل توجه در هوش مصنوعی موسیقی با دستیابی به سطوح بی سابقه ای از همسویی متن و موسیقی و کیفیت موسیقی است، همه اینها در عین حفظ کارایی محاسباتی قابل توجه.
Futureverse، یک شرکت فناوری و محتوای هوش مصنوعی و metaverse، راه اندازی JEN-1، یک مدل جدید هوش مصنوعی برای تولید متن به موسیقی را اعلام کرده است. JEN-1 یک پیشرفت قابل توجه در هوش مصنوعی موسیقی است، زیرا اولین مدلی است که با حفظ کارایی محاسباتی، به بهترین عملکرد در چینش متن و موسیقی و کیفیت موسیقی دست یافته است.
ما به طور گسترده ای JEN-1 را بر اساس خطوط پایه پیشرفته در مقیاس های عینی و ارزیابی های انسانی ارزیابی می کنیم. نتایج نشان میدهد که JEN-1 موسیقی با کیفیت ادراکی بالاتر (85.7/100) در مقایسه با بهترین روشهای فعلی (83.8/100) تولید میکند.» Futureverse نوشت.
ایجاد موسیقی از متن به دلیل ماهیت پیچیده تنظیم های موسیقی و نیاز به نرخ نمونه برداری بالا دشوار است. مطابق با مقاله Futureverse، JEN-1 می تواند بر این چالش ها غلبه کند زیرا مدل انتشار آن بر اساس آموزش خودبازگشتی و غیر خودرگرسیون است. این به JEN-1 اجازه می دهد تا موسیقی واقعی و خلاقانه تولید کند.
به دلیل کارایی محاسباتی آن، می توان از JEN-1 برای تولید موسیقی در زمان واقعی استفاده کرد که فرصت های جدیدی را برای تولید موسیقی، اجرای زنده و واقعیت مجازی باز می کند.
مدل هوش مصنوعی از رمزگذار خودکار ویژه و مدل انتشار برای تولید مستقیم صدای استریو دقیق با نرخ نمونه برداری بالای 48 کیلوهرتز. علاوه بر این، JEN-1 از افت کیفیت معمول هنگام تبدیل ویژگی های صوتی جلوگیری می کند. این مدل در چندین کار، از جمله تولید موسیقی، ادامه سکانسهای موسیقی، و پر کردن قسمتهای از دست رفته، آموزش دیده است که آن را همهکاره میکند.
JEN-1 همچنین روشهای خودرگرسیون و غیر خودرگرسیون را هوشمندانه ترکیب میکند تا تعادل بین وابستگیها را ایجاد کند. موسیقی و تولید کارآمد آن علاوه بر این، مدل هوش مصنوعی از تکنیکهای یادگیری هوشمند استفاده میکند و برای رسیدگی به جنبههای مختلف موسیقی به طور همزمان آموزش دیده است.
JEN-1 در مقابل MusicLM، MusicGen و سایر مدلهای هوش مصنوعی
Futureverse JEN-1 را با مدل های پیشرفته فعلی مانند MusicLM از Google و MusicGen از Meta مقایسه می کند و نشان می دهد که رویکرد آن نتایج بهتری در وفاداری و واقع گرایی ایجاد می کند.
ارزیابی بر اساس عملکرد مدلهای مختلف در مجموعه تست MusicCaps که مجموعهای از جفتهای موسیقی و متن است، انجام شد. Futureverse از معیارهای کمی و کیفی برای ارزیابی مدل ها استفاده کرد. معیارهای کمی شامل امتیاز FAD (وفاداری-آگاهی-از هم گسیختگی) و نمره CLAP (تداوم-و-محلی-ناهنجاری-جریمات) بود. معیارهای کیفی شامل ارزیابی های انسانی از کیفیت و همسویی موسیقی تولید شده بود.
نتایج نشان داد که JEN-1 در معیارهای کمی و کیفی از سایر مدل ها بهتر عمل می کند. JEN-1 بالاترین امتیازات FAD و CLAP را داشت و بالاترین امتیاز را از ارزیابان انسانی دریافت کرد. علاوه بر این، JEN-1 از نظر محاسباتی کارآمدتر از مدلهای دیگر بود و تنها 22.6 درصد از پارامترهای MusicGen و 57.7 درصد از پارامترهای Noise2Music را داشت.
JEN-1 نشانه ای از پتانسیل رو به رشد هوش مصنوعی در صنعت موسیقی است. هوش مصنوعی در حال حاضر برای ایجاد موسیقی استفاده می شود، اما JEN-1 یک گام مهم به جلو است. این اولین مدلی است که به عملکرد پیشرفتهای در معیارهای کمی و کیفی دست یافته است و همچنین از نظر محاسباتی کارآمدتر از مدلهای قبلی است.
ادامه مطلب:
- 20 نمونه برتر تبدیل متن به موسیقی هوش مصنوعی با دستورات Mubert
- هوش مصنوعی گوگل اولین تولیدکننده متن به موسیقی AudioLM را معرفی کرد
- MusicLM: یک مدل جدید هوش مصنوعی متن به موسیقی و تصویر به موسیقی از گوگل
- Futureverse برای برنامه شتابدهنده کمپ پایه Futureverse به نیروها با شرکتهای Outlier میپیوندد
رفع مسئولیت
در خط با دستورالعمل های پروژه اعتماد، لطفاً توجه داشته باشید که اطلاعات ارائه شده در این صفحه به عنوان مشاوره حقوقی، مالیاتی، سرمایه گذاری، مالی یا هر شکل دیگری در نظر گرفته نشده است و نباید تفسیر شود. مهم است که فقط در موردی سرمایه گذاری کنید که توانایی از دست دادن آن را دارید و در صورت شک و تردید به دنبال مشاوره مالی مستقل باشید. برای کسب اطلاعات بیشتر، پیشنهاد می کنیم به شرایط و ضوابط و همچنین صفحات راهنمایی و پشتیبانی ارائه شده توسط صادرکننده یا تبلیغ کننده مراجعه کنید. MetaversePost متعهد به گزارش دقیق و بی طرفانه است، اما شرایط بازار بدون اطلاع قبلی ممکن است تغییر کند.
درباره نویسنده
Agne روزنامه نگاری است که آخرین روندها و تحولات در متاورس، هوش مصنوعی و Web3 صنایع برای Metaverse Post. اشتیاق او به داستان نویسی باعث شده است که مصاحبه های متعددی با متخصصان این حوزه ها انجام دهد و همیشه به دنبال کشف داستان های هیجان انگیز و جذاب است. اگنه دارای مدرک لیسانس در ادبیات است و پیشینه گسترده ای در نوشتن در مورد طیف گسترده ای از موضوعات از جمله سفر، هنر و فرهنگ دارد. او همچنین به عنوان سردبیر برای سازمان حقوق حیوانات داوطلب شده است، جایی که به افزایش آگاهی در مورد مسائل رفاهی حیوانات کمک کرد. با او تماس بگیرید [ایمیل محافظت شده].
مقالات بیشتر
Agne روزنامه نگاری است که آخرین روندها و تحولات در متاورس، هوش مصنوعی و Web3 صنایع برای Metaverse Post. اشتیاق او به داستان نویسی باعث شده است که مصاحبه های متعددی با متخصصان این حوزه ها انجام دهد و همیشه به دنبال کشف داستان های هیجان انگیز و جذاب است. اگنه دارای مدرک لیسانس در ادبیات است و پیشینه گسترده ای در نوشتن در مورد طیف گسترده ای از موضوعات از جمله سفر، هنر و فرهنگ دارد. او همچنین به عنوان سردبیر برای سازمان حقوق حیوانات داوطلب شده است، جایی که به افزایش آگاهی در مورد مسائل رفاهی حیوانات کمک کرد. با او تماس بگیرید [ایمیل محافظت شده].
