MusicLM: novi Googleov AI model pretvaranja teksta u glazbu i slike u glazbu
Ukratko
Google predstavlja MusicLM, model za generiranje glazbe visoke vjernosti iz tekstualnih opisa.
MusicLM može biti uvjetovan i tekstom i melodijom na način da može transformirati zviždukane i pjevušene melodije prema stilu opisanom u opisu teksta.
Model može generirati glazbu u raznim žanrovima, uključujući klasiku, jazz i rock.
Google predstavlja MusicLM, model za generiranje glazbe visoke vjernosti iz tekstualnih opisa kao što je "smirujuća melodija violine podržana iskrivljenim gitarskim rifom". MusicLM pretvara proces uvjetnog generiranja glazbe kao hijerarhijski zadatak modeliranja od sekvence do sekvence i generira glazbu na 24 kHz koja ostaje dosljedna nekoliko minuta.
Google eksperimenti pokazuju da MusicLM nadmašuje prethodne sustave, kako u kvaliteti zvuka tako iu pridržavanju tekstualnog opisa. Štoviše, pokazuje da MusicLM može biti uvjetovan i tekstom i melodijom na način da može transformirati zviždukane i pjevušene melodije prema stilu opisanom u opisu teksta. Kako bismo podržali buduća istraživanja, javno objavljujemo MusicCaps, skup podataka koji se sastoji od 5.5 tisuća parova glazbe i teksta s obogaćenim tekstualnim opisima koje pružaju stručnjaci.
| Povezani članak: Text-to-3D: Google je razvio neuronsku mrežu koja generira 3D modele iz tekstualnih opisa |
Model MusicLM obučen je na velikom korpusu glazbenih nota, što je omogućilo umjetnoj inteligenciji da nauči strukturu glazbe. Model može generirati glazbu u raznim žanrovima, uključujući klasiku, jazz i rock. Osim toga, AI model može stvoriti nove, originalne skladbe.
Model MusicLM važan je razvoj u području glazbe generirane umjetnom inteligencijom. Model predstavlja značajan napredak u odnosu na prethodne modele, koji su bili ograničeni na kraće glazbene komade ili samo sposobni za generiranje jednostavnih melodija. Novi model otvara mogućnost korištenja umjetne inteligencije za generiranje dugih, složenih glazbenih komada, koji bi se mogli koristiti u filmovima, video igrama ili drugim medijima.
Novi AI model može generirati dugu glazbu generacije do pet minuta.
| Povezani članak: Stable Diffusion može stvoriti novu glazbu generiranjem spektrograma na temelju teksta |
AI model može stvarati glazbu koristeći titlove iz igara i filmova.
Osim toga, AI model može generirati glazbu koristeći slike kao ulaz.
Pročitajte više o umjetnoj inteligenciji u glazbenoj industriji:
Izjava o odricanju od odgovornosti
U skladu s Smjernice projekta povjerenja, imajte na umu da informacije navedene na ovoj stranici nemaju namjeru i ne smiju se tumačiti kao pravni, porezni, investicijski, financijski ili bilo koji drugi oblik savjeta. Važno je ulagati samo ono što si možete priuštiti izgubiti i potražiti neovisni financijski savjet ako imate bilo kakvih nedoumica. Za dodatne informacije predlažemo da pogledate odredbe i uvjete, kao i stranice za pomoć i podršku koje pruža izdavatelj ili oglašivač. MetaversePost je predan točnom, nepristranom izvješćivanju, ali tržišni uvjeti podložni su promjenama bez prethodne najave.
O autoru
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
Više članaka
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
