SingSong: Google AI tadqiqotchilari kirish vokaliga hamrohlik qilish uchun musiqa yaratish yo'lini topdilar
Qisqacha
SingSong deb nomlangan yangi tizim chuqur foydalanadi o'rganish modeli mavjud tizimlarga qaraganda qo'shiq aytish bilan ko'proq mos keladigan musiqa yaratish.
Tadqiqotchilarning taʼkidlashicha, tizim professional xonandalar uchun karaoke treklarini yaratish yoki havaskor qoʻshiqchilarga oʻz ovoziga mos keladigan joʻrlikni topishga yordam berish uchun ishlatilishi mumkin.
Google tadqiqotchilari qo‘shiq aytishga mos musiqa yaratish uchun sun’iy intellektdan foydalanish yo‘lini topdi. SingSong deb nomlangan yangi tizim boshqa mavjud tizimlarga qaraganda qo'shiq kuylash bilan ko'proq mos keladigan hamrohlikni yaratish uchun chuqur o'rganish modelidan foydalanadi. Tadqiqotchilarning taʼkidlashicha, tizim professional xonandalar uchun karaoke treklarini yaratish yoki havaskor qoʻshiqchilarga oʻz ovoziga koʻproq mos keladigan qoʻshiq topishda yordam berish uchun ishlatilishi mumkin.
SingSong Google tomonidan ishlab chiqilgan tizim boʻlib, u kiritilgan vokallarga hamrohlik qilish uchun instrumental musiqa yaratadi. Bu musiqachilarga ham, musiqachi bo'lmaganlarga ham o'z ovozlariga ega bo'lgan musiqa yaratish uchun oddiy yangi yondashuvni taqdim etishi mumkin. Ishlab chiquvchilar bunga erishish uchun musiqa manbalarini ajratish va audio ishlab chiqarishdagi so'nggi yutuqlarga asoslanadi. Ishlab chiquvchilar, ayniqsa, musiqa yozuvlarining katta korpusidan moslashtirilgan vokal va instrumental manba juftliklarini yaratish uchun eng zamonaviy manbalarni ajratish usulidan foydalanadilar. Keyinchalik, ishlab chiquvchilar o'zgartiradilar AudioLM, shartli "audio-audio" yaratish vazifalari uchun manbadan ajratilgan (vokal, instrumental) juftliklar bo'yicha o'qitilishi uchun so'zsiz audio ishlab chiqarish uchun ilg'or usul.
| Tavsiya etilgan post: Roliksiz treklarni yaratish uchun eng yaxshi 5 AI musiqa va audio generatorlari |
Sun'iy intellekt tadqiqotchilari manbadan ajratilgan o'quv ma'lumotlaridan tizimni umumlashtirishni yaxshilash uchun (vokallarda vokalning artefaktlari mavjud bo'lgan) standart AudioLM xususiyatiga nisbatan eng yaxshisi ajratilgan vokalda miqdoriy ko'rsatkichni 53% ga oshiradigan vokal kiritishlarning turli xil xususiyatlarini o'rganadilar. instrumental) ishlab chiquvchilar foydalanuvchilardan kutishlari mumkin bo'lgan alohida vokallarga. Tinglovchilar SingSong tomonidan ishlab chiqarilgan instrumentallarni bir xil ovozli kirishlar bilan juftlik bilan solishtirganda, kuchli qidiruv darajasidagi asboblardan ko'ra ko'proq afzal ko'rdilar.
Yangi tizim, aksincha, adan foydalanadi chuqur o'rganish modeli musiqaning katta ma'lumotlar to'plamida o'qitilgan. Bu tizimga xonandaning ovozi va vaqtiga mos keladigan hamrohlikni yaratish imkonini beradi.
Tadqiqot uchun tinglovchilarga 10 soniyalik ikkita vokal-instrumental mashup beriladi, ularda ovozlar (MSDB18-testidan olingan) bir xil, instrumentallar farqlanadi va turli manbalardan keladi (asosiy haqiqat, google modellari, yoki asosiy chiziqlar). Savol tinglovchilardan ikkita kombinatsiyadan qaysi biri cholg'u fonlari vokalga musiqiy jihatdan mos kelishini tanlashni so'raydi.
| Tavsiya etilgan post: Top 7 AI ovoz generatorlari va matndan nutqqa ovozli klonlash |
SingSong-ning yangi namunalari
Bir qator chuqur neyron tarmoqlardan foydalangan holda va generativ modellar, ishlab chiquvchilar uzoqroq segmentlar uchun kechikishsiz harmonik hamrohliklarni yaratishga qodir.
MSDB18 ma'lumotlar to'plamining professional ovozlari oldingi misollarda ishlatilgan. SingSong-ning har kimga o'z ovozi bilan musiqa yaratishini qo'llab-quvvatlash va imkon berish qobiliyati bizni ham qiziqtiradi. Bu erda biz buni Vocadito ma'lumotlar to'plamidagi vokal namunalari yordamida ko'rib chiqamiz, jumladan, iste'molchi elektronikasida havaskor vokalchilarning yozuvlari.
Tizim hali rivojlanishning dastlabki bosqichida. Tadqiqotchilar uni tijorat maqsadlarida ishlatishdan oldin takomillashtirish kerakligini aytishsa-da, ular karaoke sanoatida inqilob qilish va havaskor qo'shiqchilarga o'zlari uchun yaxshi mos keladigan hamrohlikni topishga yordam berish imkoniyatiga ega deb hisoblashadi.
Batafsil tegishli maqolalarni o'qing:
Masʼuliyatdan voz kechish
Bunga javoban Ishonch loyihasi bo'yicha ko'rsatmalar, iltimos, ushbu sahifada taqdim etilgan ma'lumotlar yuridik, soliq, investitsiya, moliyaviy yoki boshqa har qanday maslahat shakli sifatida talqin qilinmasligi va talqin qilinmasligini unutmang. Faqat yo'qotishingiz mumkin bo'lgan narsaga investitsiya qilish va agar shubhangiz bo'lsa, mustaqil moliyaviy maslahat olish muhimdir. Qo'shimcha ma'lumot olish uchun biz shartlar va emitent yoki reklama beruvchi tomonidan taqdim etilgan yordam va qo'llab-quvvatlash sahifalariga murojaat qilishni tavsiya qilamiz. MetaversePost to'g'ri, xolis hisobot berish majburiyatini oladi, lekin bozor sharoitlari ogohlantirilmasdan o'zgarishi mumkin.
Muallif haqida
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
Boshqa maqolalar
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
