Futureverse JEN-1 ni taqdim etdi: real vaqtda matndan musiqaga yaratish uchun inqilobiy AI modeli


Qisqacha
Futureverse, sun'iy intellekt va metaverse texnologiyasining kashshof kompaniyasi JEN-1, matnni musiqaga aylantirish uchun mo'ljallangan sun'iy intellekt modelini taqdim etdi.
JEN-1 misli ko'rilmagan darajadagi matn-musiqa moslashuvi va musiqa sifatiga erishish orqali musiqa AIda ajoyib sakrashni ifodalaydi va shu bilan birga ajoyib hisoblash samaradorligini saqlaydi.

Futureverse, sun'iy intellekt va metaverse texnologiyalari va kontent kompaniyasi matndan musiqaga o'tish uchun yangi sun'iy intellekt modeli JEN-1ni ishga tushirilishini e'lon qildi. JEN-1 musiqa AI sohasidagi muhim yutuqdir, chunki u hisoblash samaradorligini saqlab qolgan holda matn-musiqa moslashuvi va musiqa sifati bo‘yicha eng so‘nggi ko‘rsatkichlarga erishgan birinchi modeldir.
"Biz JEN-1 ni ob'ektiv ko'rsatkichlar va insoniy baholash bo'yicha eng so'nggi ko'rsatkichlar bo'yicha keng qamrovli baholaymiz. Natijalar shuni ko'rsatadiki, JEN-1 hozirgi eng yaxshi usullar (85.7/100) bilan solishtirganda sezgi sifatida yuqori sifatli musiqa ishlab chiqaradi (83.8/100), - deb yozadi Futureverse.
Matndan musiqa yaratish musiqiy aranjirovkalarning murakkab tabiati va yuqori namuna olish tezligiga bo'lgan ehtiyoj tufayli qiyin. Ga binoan Futureverse qog'ozi, JEN-1 bu qiyinchiliklarni engib o'tishi mumkin, chunki uning diffuziya modeli avtoregressiv va avtoregressiv bo'lmagan treningga asoslangan. Bu JEN-1 ga real va ijodiy musiqa yaratish imkonini beradi.
Hisoblash samaradorligi tufayli JEN-1 dan real vaqtda musiqa yaratish uchun foydalanish mumkin, bu esa musiqa ishlab chiqarish, jonli ijro va virtual haqiqat uchun yangi imkoniyatlar ochadi.
AI modeli maxsus avtokodlovchidan foydalanadi va diffuziya modeli 48 kHz yuqori namuna olish tezligida batafsil stereo audioni bevosita ishlab chiqarish. Bundan tashqari, JEN-1 audio funksiyalarini konvertatsiya qilishda odatdagi sifatni yo'qotishdan qochadi. Model musiqa yaratish, musiqa ketma-ketliklarini davom ettirish va etishmayotgan qismlarni to'ldirishni o'z ichiga olgan bir nechta vazifalarga o'rgatilgan, bu uni ko'p qirrali qiladi.
JEN-1 shuningdek, avtoregressiv va avtoregressiv bo'lmagan usullarni aqlli ravishda birlashtirib, qaramliklarni qo'lga kiritish o'rtasidagi muvozanatni muvozanatlashtiradi. musiqa va uni samarali ishlab chiqarish. Bundan tashqari, AI modeli aqlli o'rganish usullarini qo'llaydi va bir vaqtning o'zida turli xil musiqiy jihatlarni boshqarishga o'rgatiladi.
JEN-1 MusicLM, MusicGen va boshqa AI modellariga qarshi
Futureverse JEN-1-ni Google-dan MusicLM va Meta-dan MusicGen kabi zamonaviy modellar bilan taqqoslaydi va uning yondashuvi sodiqlik va realizmda yaxshi natijalarga erishishini namoyish etadi.
Baholash musiqa va matn juftliklarining maʼlumotlar toʻplami boʻlgan MusicCaps test toʻplamidagi turli modellarning ishlashiga asoslandi. Futureverse modellarni baholash uchun ham miqdoriy, ham sifat ko'rsatkichlaridan foydalangan. Miqdoriy o'lchovlar FAD (Fidelity-Awareness-Disentanglement) balli va CLAP (Continuity-and-Local-Anomaly-Penalties) ballini o'z ichiga oladi. Sifatli o'lchovlar yaratilgan musiqaning sifati va uyg'unligini inson tomonidan baholashni o'z ichiga oladi.
Natijalar shuni ko'rsatdiki, JEN-1 miqdoriy va sifat ko'rsatkichlari bo'yicha boshqa modellardan ustundir. JEN-1 eng yuqori FAD va CLAP ballariga ega bo'lgan va inson baholovchilaridan eng yuqori ball olgan. Bundan tashqari, JEN-1 boshqa modellarga qaraganda hisoblash jihatidan samaraliroq bo'lib, MusicGen parametrlarining atigi 22.6% va Noise57.7Music parametrlarining 2% ni tashkil etdi.
JEN-1 musiqa industriyasida sun'iy intellektning o'sib borayotgan salohiyatining belgisidir. AI allaqachon musiqa yaratish uchun ishlatilgan, ammo JEN-1 oldinga muhim qadamdir. Bu miqdoriy va sifat ko'rsatkichlari bo'yicha eng so'nggi ko'rsatkichlarga erishgan birinchi model bo'lib, u avvalgi modellarga qaraganda ancha samarali hisoblanadi.
Ko'proq o'qing:
- Mubert ko'rsatmalari bilan AI matndan musiqaga 20 ta eng yaxshi namunalar
- Google sun'iy intellekt birinchi bo'lib matndan musiqaga AudioLM generatorini e'lon qildi
- MusicLM: Google’ning matndan musiqaga va tasvirdan musiqaga yangi sunʼiy intellekt modeli
- Futureverse Futureverse Baza Kampi Accelerator dasturi uchun tashqi korxonalar bilan kuchlarni birlashtiradi
Masʼuliyatdan voz kechish
Bunga javoban Ishonch loyihasi bo'yicha ko'rsatmalar, iltimos, ushbu sahifada taqdim etilgan ma'lumotlar yuridik, soliq, investitsiya, moliyaviy yoki boshqa har qanday maslahat shakli sifatida talqin qilinmasligi va talqin qilinmasligini unutmang. Faqat yo'qotishingiz mumkin bo'lgan narsaga investitsiya qilish va agar shubhangiz bo'lsa, mustaqil moliyaviy maslahat olish muhimdir. Qo'shimcha ma'lumot olish uchun biz shartlar va emitent yoki reklama beruvchi tomonidan taqdim etilgan yordam va qo'llab-quvvatlash sahifalariga murojaat qilishni tavsiya qilamiz. MetaversePost to'g'ri, xolis hisobot berish majburiyatini oladi, lekin bozor sharoitlari ogohlantirilmasdan o'zgarishi mumkin.
Muallif haqida
Agne - bu metaverse, AI va eng so'nggi tendentsiyalari va ishlanmalarini yorituvchi jurnalist Web3 uchun sanoatlar Metaverse Post. Uning hikoya qilishga bo'lgan ishtiyoqi uni har doim hayajonli va qiziqarli voqealarni ochishga intilib, ushbu sohadagi mutaxassislar bilan ko'plab intervyular o'tkazishga undadi. Agne adabiyot bo'yicha bakalavr darajasiga ega va sayohat, san'at va madaniyat kabi keng ko'lamli mavzular haqida yozishda keng ma'lumotga ega. U, shuningdek, hayvonlar huquqlarini himoya qilish tashkilotining muharriri sifatida ko'ngilli bo'lib, u erda hayvonlar farovonligi muammolari haqida xabardorlikni oshirishga yordam berdi. U bilan bog'laning [elektron pochta bilan himoyalangan].
Boshqa maqolalar

Agne - bu metaverse, AI va eng so'nggi tendentsiyalari va ishlanmalarini yorituvchi jurnalist Web3 uchun sanoatlar Metaverse Post. Uning hikoya qilishga bo'lgan ishtiyoqi uni har doim hayajonli va qiziqarli voqealarni ochishga intilib, ushbu sohadagi mutaxassislar bilan ko'plab intervyular o'tkazishga undadi. Agne adabiyot bo'yicha bakalavr darajasiga ega va sayohat, san'at va madaniyat kabi keng ko'lamli mavzular haqida yozishda keng ma'lumotga ega. U, shuningdek, hayvonlar huquqlarini himoya qilish tashkilotining muharriri sifatida ko'ngilli bo'lib, u erda hayvonlar farovonligi muammolari haqida xabardorlikni oshirishga yordam berdi. U bilan bog'laning [elektron pochta bilan himoyalangan].