Muusikast tantsuks: EDGE AI genereerib helisisendi põhjal TikToki jaoks lõpmatu arvu tantsuideid
Põgusalt
EDGE: AI loodud koreograafiatarkvara, mis muudab tantsumaailma
Stanfordi ülikoolil on teatas võimas muusikast tantsuks AI, mis genereerib tantsu helisisendist nimega EDGE. EDGE on tõhus meetod kohandatava tantsu loomiseks, mis suudab toota füüsiliselt usutavaid, realistlikke tantse, järgides samal ajal mis tahes pakutavat muusikat. Jukeboxi, võimsa muusikafunktsioonide eraldaja ja trafopõhise difusioonimudeli abil pakub EDGE võimsaid redigeerimisvõimalusi, mis sobivad ideaalselt tantsuks, nagu liigeste kohandamine, vahepealne liikumine ja tantsu jätkamine. See avastab, et inimeste hindajad eelistavad EDGE loodud tantse võrreldes hiljutiste lähenemisviisidega, nagu Tantsimine ja FAKT.
Muusikast koreograafiani: kuidas EDGE oma tantse genereerib
Isegi looduses leiduvate muusikanäidiste puhul suudab EDGE toota kvaliteetseid tantse, kasutades tugeva Jukeboxi mudeli muusika manuseid. EDGE kasutab sisendmuusika lisamiseks külmutatud Jukeboxi mudelit. Viiesekundiliste tantsuklippide seeriat kasutatakse tingimuslause õpetamiseks difusioonimudel kuidas klippidesse manustatud muusikat kaardistada. Enne mitme klipi partiide ühendamist suvalise pikkusega täisvideo loomiseks rakendatakse ajalise järjepidevuse tagamiseks ajalisi piiranguid.
Värskelt loodud muusikast tantsuks väljundid
EDGE toetab meelevaldseid ajalisi ja ruumilisi piiranguid. Sellega saab toetada paljusid lõppkasutaja rakendusi, sealhulgas:
- Nõudes ajalist järjepidevust arvukate järjestuste partiide vahel, saab toota suvalise pikkusega tantse.
- Tantsud, mis hõlmavad liigeste piiranguid, nagu alakeha liikumine, mis põhjustab ülakeha genereerimist, või vastupidi.
- Tantsud alguse ja lõpu liigutustega, mis on ette määratud.
- Tantse, mis algavad etteantud liigutusega, nimetatakse tantsujätkudeks.
Teadlased leidsid, et inimvaatlejad eelistasid ülekaalukalt EDGE-algoritmiga genereeritud tantse teiste algoritmide genereeritud tantse. Uuringu autorid ütlevad, et EDGE-algoritm kujutab endast suurt edasiminekut arvutipõhise tantsu valdkonnas. Nad usuvad, et algoritmi saaks kasutada reaalse maailma tantsude loomiseks ja virtuaalsed sündmused, nagu sotsiaalsed ja TikToki trendid, pulmad, peod või ettevõtte funktsioonid.
Loe AI kohta lähemalt:
Kaebused
Vastavalt Usaldusprojekti juhised, pange tähele, et sellel lehel esitatud teave ei ole mõeldud ega tohiks tõlgendada kui juriidilist, maksu-, investeerimis-, finants- või muud nõuannet. Oluline on investeerida ainult seda, mida saate endale lubada kaotada, ja kahtluste korral küsida sõltumatut finantsnõu. Lisateabe saamiseks soovitame vaadata nõudeid ja tingimusi ning väljaandja või reklaamija pakutavaid abi- ja tugilehti. MetaversePost on pühendunud täpsele ja erapooletule aruandlusele, kuid turutingimusi võidakse ette teatamata muuta.
Umbes Autor
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
Veel artikleid
Damir on ettevõtte meeskonnajuht, tootejuht ja toimetaja Metaverse Post, mis hõlmab selliseid teemasid nagu AI/ML, AGI, LLM-id, Metaverse ja Web3-seotud väljad. Tema artiklid meelitavad igal kuul tohutut vaatajaskonda, üle miljoni kasutaja. Ta näib olevat ekspert, kellel on 10-aastane SEO ja digitaalse turunduse kogemus. Damirit on mainitud ajakirjades Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muud väljaanded. Ta reisib digitaalse nomaadina AÜE, Türgi, Venemaa ja SRÜ vahel. Damir omandas bakalaureusekraadi füüsikas, mis on tema arvates andnud talle kriitilise mõtlemise oskused, mida on vaja pidevalt muutuval Interneti-maastikul edukaks saamiseks.
