MusicLM: jauns teksta pārveides mūzika un attēla pārvēršanas AI modelis no Google
Īsumā
Google iepazīstina ar MusicLM — modeli augstas precizitātes mūzikas ģenerēšanai no teksta aprakstiem.
MusicLM var būt atkarīgs gan no teksta, gan no melodijas, jo tas var pārveidot svilptas un dungotas melodijas atbilstoši stilam, kas aprakstīts teksta parakstā.
Modelis var radīt mūziku dažādos žanros, tostarp klasiskajā, džezā un rokā.
Google iepazīstina ar MusicLM — modeli augstas precizitātes mūzikas ģenerēšanai no teksta aprakstiem, piemēram, "nomierinoša vijoles melodija, ko atbalsta izkropļots ģitāras rifs". MusicLM nosaka nosacītās mūzikas ģenerēšanas procesu kā hierarhisku secību-sekvences modelēšanas uzdevumu, un tas ģenerē mūziku ar frekvenci 24 kHz, kas paliek nemainīga vairākas minūtes.
Google eksperimenti liecina, ka MusicLM pārspēj iepriekšējās sistēmas gan audio kvalitātes, gan teksta apraksta ievērošanas ziņā. Turklāt tas parāda, ka MusicLM var būt atkarīgs gan no teksta, gan no melodijas, jo tas var pārveidot svilptas un dungotas melodijas atbilstoši stilam, kas aprakstīts teksta parakstā. Lai atbalstītu turpmākos pētījumus, mēs publiski izlaižam MusicCaps — datu kopu, kas sastāv no 5.5 XNUMX mūzikas un teksta pāriem ar bagātināta teksta aprakstiem, ko nodrošina cilvēku eksperti.
| Saistītais raksts: Teksta pārveide 3D: Google ir izstrādājis neironu tīklu, kas ģenerē 3D modeļus no teksta aprakstiem |
MusicLM modelis ir apmācīts, izmantojot lielu mūzikas partitūru, kas ļāva AI apgūt mūzikas struktūru. Modelis var radīt mūziku dažādos žanros, tostarp klasiskajā, džezā un rokā. Turklāt AI modelis var radīt jaunas, oriģinālas kompozīcijas.
MusicLM modelis ir svarīga attīstība mākslīgā intelekta radītās mūzikas jomā. Modelis ir ievērojams progress salīdzinājumā ar iepriekšējiem modeļiem, kas bija ierobežoti ar īsākiem mūzikas gabaliem vai spēj radīt tikai vienkāršas melodijas. Jaunais modelis paver iespēju izmantot AI, lai ģenerētu garus, sarežģītus mūzikas gabalus, ko varētu izmantot filmās, videospēlēs vai citos medijos.
Jaunais AI modelis var radīt garu mūziku paaudzes līdz piecām minūtēm.
| Saistītais raksts: Stable Diffusion var radīt jaunu mūziku, ģenerējot spektrogrammas, kuru pamatā ir teksts |
AI modelis var radīt mūziku, izmantojot parakstus no spēlēm un filmām.
Turklāt AI modelis var ģenerēt mūziku, izmantojot attēlus kā ievadi.
Lasiet vairāk par AI mūzikas industrijā:
Atbildības noraidīšana
Atbilstīgi Uzticības projekta vadlīnijas, lūdzu, ņemiet vērā, ka šajā lapā sniegtā informācija nav paredzēta un to nedrīkst interpretēt kā juridisku, nodokļu, ieguldījumu, finanšu vai jebkāda cita veida padomu. Ir svarīgi ieguldīt tikai to, ko varat atļauties zaudēt, un meklēt neatkarīgu finanšu padomu, ja jums ir šaubas. Lai iegūtu papildinformāciju, iesakām skatīt pakalpojumu sniegšanas noteikumus, kā arī palīdzības un atbalsta lapas, ko nodrošina izdevējs vai reklāmdevējs. MetaversePost ir apņēmies sniegt precīzus, objektīvus pārskatus, taču tirgus apstākļi var tikt mainīti bez iepriekšēja brīdinājuma.
Par Autors
Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē.
Vairāk rakstus
Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē.
