Musiikista tanssiksi: EDGE AI luo äärettömän määrän tanssiideoita TikTokille äänitulon perusteella
Lyhyesti
EDGE: tekoälyn luoma koreografiaohjelmisto, joka muuttaa tanssimaailman
Stanfordin yliopistolla on ilmoitti tehokas musiikista tanssiin AI, joka luo tanssia äänisyötteestä nimeltä EDGE. EDGE on tehokas menetelmä mukautettavaan tanssin luomiseen, joka voi tuottaa fyysisesti uskottavia, realistisia tansseja noudattaen mitä tahansa mukana tulevaa musiikkia. Jukeboxin, tehokkaan musiikin ominaisuuksien erottimen ja muuntajapohjaisen diffuusiomallin avulla EDGE tarjoaa tehokkaita editointiominaisuuksia, jotka ovat ihanteellisia tanssiin, kuten nivelkohtaista kuntoilua, liikettä välillä ja tanssin jatkamista. Se havaitsee, että ihmisten arvioijat suosivat suuresti EDGE:n luomia tansseja verrattuna viimeaikaisiin lähestymistapoihin, kuten Bailando ja FAKTAA.
Musiikista koreografiaan: Kuinka EDGE luo tanssinsa
Jopa luonnossa löydetyille musiikkinäytteille EDGE voi tuottaa korkealaatuisia tansseja käyttämällä vankan Jukebox-mallin musiikin upotuksia. EDGE käyttää jäädytettyä Jukebox-mallia musiikin syöttöön. Viiden sekunnin tanssileikkeiden sarjaa käytetään ehdollisen opettamiseen diffuusio malli kuinka kartoittaa leikkeisiin upotettu musiikki. Ennen kuin yhdistetään useita leikkeitä yhteen mielivaltaisen pituisen koko videon luomiseksi, ajallisia rajoituksia sovelletaan ajallisen johdonmukaisuuden varmistamiseksi.
Tuoreet musiikki-tanssi-lähdöt
EDGE tukee mielivaltaisia ajallisia ja tilallisia rajoituksia. On olemassa lukuisia loppukäyttäjäsovelluksia, joita tämä voi tukea, mukaan lukien:
- Vaatimalla ajallista jatkuvuutta useiden sekvenssien erien välillä voidaan tuottaa mielivaltaisen pituisia tansseja.
- Tanssit, jotka sisältävät nivelrajoituksia, kuten alavartalon liikettä aiheuttaen ylävartalon sukupolven tai päinvastoin.
- Tanssii alku- ja loppuliikkeillä, jotka on ennalta määrätty.
- Ennalta määrätyllä liikkeellä alkavia tansseja kutsutaan tanssijatkoiksi.
Tutkijat havaitsivat, että ihmistarkkailijat suosivat ylivoimaisesti EDGE-algoritmin luomia tansseja muiden algoritmien luomiin tansseihin. Tutkimuksen kirjoittajat sanovat, että EDGE-algoritmi edustaa suurta edistystä tietokoneella luodun tanssin alalla. He uskovat, että algoritmia voitaisiin käyttää luomaan tansseja tosielämän ja virtuaalitapahtumat, kuten sosiaaliset ja TikTok-trendit, häät, juhlat tai yritystapahtumat.
Lue lisää tekoälystä:
Vastuun kieltäminen
Mukaisesti Luottamusprojektin ohjeetHuomaa, että tällä sivulla annettuja tietoja ei ole tarkoitettu eikä niitä tule tulkita oikeudellisiksi, verotukselliseksi, sijoitus-, rahoitus- tai minkään muun muodon neuvoiksi. On tärkeää sijoittaa vain sen verran, mitä sinulla on varaa menettää, ja pyytää riippumatonta talousneuvontaa, jos sinulla on epäilyksiä. Lisätietoja saat käyttöehdoista sekä myöntäjän tai mainostajan tarjoamista ohje- ja tukisivuista. MetaversePost on sitoutunut tarkkaan, puolueettomaan raportointiin, mutta markkinaolosuhteet voivat muuttua ilman erillistä ilmoitusta.
Author
Damir on tiimin johtaja, tuotepäällikkö ja toimittaja osoitteessa Metaverse Post, kattaa aiheita, kuten AI/ML, AGI, LLMs, Metaverse ja Web3- liittyvät kentät. Hänen artikkelinsa houkuttelevat yli miljoonan käyttäjän massiivisen yleisön joka kuukausi. Hän näyttää olevan asiantuntija, jolla on 10 vuoden kokemus hakukoneoptimoinnista ja digitaalisesta markkinoinnista. Damir on mainittu Mashablessa, Wiredissä, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muut julkaisut. Hän matkustaa Arabiemiirikuntien, Turkin, Venäjän ja IVY-maiden välillä digitaalisena nomadina. Damir suoritti kandidaatin tutkinnon fysiikasta, jonka hän uskoo antaneen hänelle kriittisen ajattelun taidot menestyäkseen jatkuvasti muuttuvassa internetin maisemassa.
lisää artikkeleita
Damir on tiimin johtaja, tuotepäällikkö ja toimittaja osoitteessa Metaverse Post, kattaa aiheita, kuten AI/ML, AGI, LLMs, Metaverse ja Web3- liittyvät kentät. Hänen artikkelinsa houkuttelevat yli miljoonan käyttäjän massiivisen yleisön joka kuukausi. Hän näyttää olevan asiantuntija, jolla on 10 vuoden kokemus hakukoneoptimoinnista ja digitaalisesta markkinoinnista. Damir on mainittu Mashablessa, Wiredissä, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muut julkaisut. Hän matkustaa Arabiemiirikuntien, Turkin, Venäjän ja IVY-maiden välillä digitaalisena nomadina. Damir suoritti kandidaatin tutkinnon fysiikasta, jonka hän uskoo antaneen hänelle kriittisen ajattelun taidot menestyäkseen jatkuvasti muuttuvassa internetin maisemassa.
