Music-to-Dance: EDGE AI generira beskonačan broj plesnih ideja za TikTok na temelju audio ulaza
Ukratko
EDGE: Softver za koreografiju generiran umjetnom inteligencijom koji mijenja svijet plesa
Sveučilište Stanford ima najavio moćna AI glazba za ples koja generira ples iz audio ulaza nazvana EDGE. EDGE je moćna metoda za prilagodljivu plesnu kreaciju koja može proizvesti fizički uvjerljive, realistične plesove uz pridržavanje bilo koje ponuđene glazbe. Uz pomoć Jukeboxa, moćnog ekstraktora glazbenih značajki, i modela difuzije temeljenog na transformatoru, EDGE nudi snažne mogućnosti uređivanja koje su idealne za ples, kao što su uvjetovanje zglobova, kretanje između i nastavak plesa. Otkriva da ljudski ocjenjivači uvelike favoriziraju plesove koje generira EDGE u usporedbi s nedavnim pristupima poput Bailando i ČINJENICA.
Od glazbe do koreografije: Kako EDGE stvara svoje plesove
Čak i za glazbene uzorke pronađene u divljini, EDGE može proizvesti visokokvalitetne plesove koristeći glazbene umetke iz robusnog modela Jukebox. Zamrznuti Jukebox model koristi EDGE za uključivanje ulazne glazbe. Niz plesnih isječaka od pet sekundi koristi se za učenje kondicionala difuzijski model kako mapirati glazbu ugrađenu u isječke. Prije spajanja serija višestrukih isječaka kako bi se stvorio puni videozapis proizvoljne duljine, primjenjuju se vremenska ograničenja kako bi se osigurala vremenska dosljednost.
Svježe generirani izlazi glazbe za ples
EDGE podržava proizvoljna vremenska i prostorna ograničenja. Brojne su aplikacije za krajnje korisnike koje ovo može podržati, uključujući:
- Zahtijevanjem vremenskog kontinuiteta kroz serije brojnih sekvenci, mogu se proizvesti plesovi proizvoljne duljine.
- Plesovi koji uključuju ograničenja zglobova, kao što su pokreti donjeg dijela tijela koji uzrokuju stvaranje gornjeg dijela tijela ili suprotno.
- Ples s početnim i završnim pokretima koji su unaprijed određeni.
- Plesovi koji započinju unaprijed određenim pokretom poznati su kao nastavci plesa.
Istraživači su otkrili da ljudski promatrači u velikoj većini preferiraju plesove koje generira EDGE algoritam u odnosu na one koje generiraju drugi algoritmi. Autori studije kažu da EDGE algoritam predstavlja veliki napredak u području računalno generiranog plesa. Vjeruju da bi se algoritam mogao koristiti za stvaranje plesova za stvarni svijet i virtualni događaji, kao što su društveni i TikTok trendovi, vjenčanja, zabave ili korporativni događaji.
Pročitajte više o AI:
Izjava o odricanju od odgovornosti
U skladu s Smjernice projekta povjerenja, imajte na umu da informacije navedene na ovoj stranici nemaju namjeru i ne smiju se tumačiti kao pravni, porezni, investicijski, financijski ili bilo koji drugi oblik savjeta. Važno je ulagati samo ono što si možete priuštiti izgubiti i potražiti neovisni financijski savjet ako imate bilo kakvih nedoumica. Za dodatne informacije predlažemo da pogledate odredbe i uvjete, kao i stranice za pomoć i podršku koje pruža izdavatelj ili oglašivač. MetaversePost je predan točnom, nepristranom izvješćivanju, ali tržišni uvjeti podložni su promjenama bez prethodne najave.
O autoru
Damir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.
Više članakaDamir je voditelj tima, product manager i urednik u Metaverse Post, koji pokriva teme kao što su AI/ML, AGI, LLMs, Metaverse i Web3- srodna polja. Njegovi članci privlače ogromnu publiku od preko milijun korisnika svakog mjeseca. Čini se da je stručnjak s 10 godina iskustva u SEO-u i digitalnom marketingu. Damir je spomenut u Mashableu, Wiredu, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i druge publikacije. Putuje između UAE, Turske, Rusije i CIS-a kao digitalni nomad. Damir je stekao diplomu prvostupnika fizike, za koju vjeruje da mu je dala vještine kritičkog razmišljanja potrebne za uspjeh u stalno promjenjivom okruženju interneta.