Music-to-Dance: EDGE AI ustvari neskončno število plesnih idej za TikTok na podlagi zvočnega vhoda
Na kratko
EDGE: programska oprema za koreografijo, ustvarjena z umetno inteligenco, ki spreminja svet plesa
Univerza Stanford ima razglasitve zmogljiv AI za glasbo v plesu, ki ustvarja ples iz zvočnega vhoda, imenovan EDGE. EDGE je močna metoda za prilagodljivo plesno ustvarjanje, ki lahko ustvari fizično verjetne, realistične plese, medtem ko se drži katere koli priložene glasbe. S pomočjo Jukeboxa, zmogljivega ekstraktorja glasbenih funkcij, in difuzijskega modela, ki temelji na transformatorju, EDGE ponuja zmogljive zmožnosti urejanja, ki so idealne za ples, kot so kondicioniranje v sklepih, vmesno gibanje in nadaljevanje plesa. Odkriva, da so človeški ocenjevalci zelo naklonjeni plesom, ki jih ustvari EDGE, v primerjavi z nedavnimi pristopi, kot je Bailando in DEJSTVO.
Od glasbe do koreografije: Kako EDGE ustvarja svoje plese
Tudi za glasbene vzorce, ki jih najdemo v naravi, lahko EDGE ustvari visokokakovostne plese z uporabo glasbenih vdelav iz robustnega modela Jukebox. EDGE uporablja model frozen Jukebox za vključitev vhodne glasbe. Niz petsekundnih plesnih posnetkov se uporablja za poučevanje pogojnika difuzijski model kako preslikati glasbo, vdelano v posnetke. Preden združite pakete več posnetkov skupaj, da ustvarite celoten video poljubne dolžine, se uporabijo časovne omejitve, da se zagotovi časovna doslednost.
Sveže ustvarjeni glasbeni izhodi za ples
EDGE podpira poljubne časovne in prostorske omejitve. To lahko podpira številne aplikacije za končne uporabnike, vključno z:
- Z zahtevo po časovni kontinuiteti med serijami številnih sekvenc je mogoče ustvariti poljubno dolge plese.
- Plesi, ki vključujejo omejitve sklepov, kot je gibanje spodnjega dela telesa, ki povzroči nastanek zgornjega dela telesa, ali nasprotno.
- Pleše z začetnimi in končnimi gibi, ki sta vnaprej določena.
- Plesi, ki se začnejo z vnaprej določenim gibom, so znani kot nadaljevanje plesa.
Raziskovalci so ugotovili, da imajo človeški opazovalci veliko raje plese, ki jih ustvari algoritem EDGE, kot tiste, ki jih ustvarijo drugi algoritmi. Avtorji študije pravijo, da algoritem EDGE predstavlja velik napredek na področju računalniško ustvarjenega plesa. Menijo, da bi lahko algoritem uporabili za ustvarjanje plesov za resnični svet in navidezni dogodki, kot so družabni trendi in trendi TikTok, poroke, zabave ali poslovne dogodke.
Preberite več o AI:
Zavrnitev odgovornosti
V skladu z Smernice projekta Trust, upoštevajte, da informacije na tej strani niso namenjene in se jih ne sme razlagati kot pravni, davčni, naložbeni, finančni ali kakršen koli drug nasvet. Pomembno je, da vlagate samo tisto, kar si lahko privoščite izgubiti, in da poiščete neodvisen finančni nasvet, če imate kakršne koli dvome. Za dodatne informacije predlagamo, da si ogledate določila in pogoje ter strani s pomočjo in podporo, ki jih nudi izdajatelj ali oglaševalec. MetaversePost se zavzema za natančno in nepristransko poročanje, vendar se tržni pogoji lahko spremenijo brez predhodnega obvestila.
O avtorju
Damir je vodja ekipe, produktni vodja in urednik pri Metaverse Post, ki pokriva teme, kot so AI/ML, AGI, LLMs, Metaverse in Web3- sorodna področja. Njegovi članki vsak mesec pritegnejo množično občinstvo več kot milijon uporabnikov. Zdi se, da je strokovnjak z 10-letnimi izkušnjami na področju SEO in digitalnega trženja. Damir je bil omenjen v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto in druge publikacije. Kot digitalni nomad potuje med ZAE, Turčijo, Rusijo in SND. Damir je diplomiral iz fizike, kar mu je po njegovem mnenju dalo sposobnosti kritičnega razmišljanja, potrebne za uspeh v nenehno spreminjajočem se okolju interneta.
več člankov
Damir je vodja ekipe, produktni vodja in urednik pri Metaverse Post, ki pokriva teme, kot so AI/ML, AGI, LLMs, Metaverse in Web3- sorodna področja. Njegovi članki vsak mesec pritegnejo množično občinstvo več kot milijon uporabnikov. Zdi se, da je strokovnjak z 10-letnimi izkušnjami na področju SEO in digitalnega trženja. Damir je bil omenjen v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto in druge publikacije. Kot digitalni nomad potuje med ZAE, Turčijo, Rusijo in SND. Damir je diplomiral iz fizike, kar mu je po njegovem mnenju dalo sposobnosti kritičnega razmišljanja, potrebne za uspeh v nenehno spreminjajočem se okolju interneta.
