Music-to-Dance: EDGE AI generează un număr infinit de idei de dans pentru TikTok pe baza intrării audio
Pe scurt
EDGE: Software-ul de coregrafie generat de AI care schimbă lumea dansului
Universitatea Stanford are a anunțat un AI puternic de muzică pentru dans care generează dans din intrarea audio numită EDGE. EDGE este o metodă puternică pentru crearea de dans personalizabilă, care poate produce dansuri realiste credibile din punct de vedere fizic, respectând în același timp orice muzică furnizată. Cu ajutorul Jukebox, un extractor de caracteristici muzicale puternice și un model de difuzie bazat pe transformator, EDGE oferă capabilități de editare puternice care sunt ideale pentru dans, cum ar fi condiționarea articulațiilor, mișcarea intermediară și continuarea dansului. Descoperă că evaluatorii umani preferă mult dansurile generate de EDGE în comparație cu abordările recente precum Bailando și FACT.
De la muzică la coregrafie: cum EDGE își generează dansurile
Chiar și pentru mostrele de muzică găsite în sălbăticie, EDGE poate produce dansuri de înaltă calitate folosind încorporarea muzicii de la modelul robust Jukebox. Un model de Jukebox înghețat este folosit de EDGE pentru a încorpora muzica de intrare. O serie de clipuri de dans de cinci secunde sunt folosite pentru a preda un condițional model de difuzie cum să mapați muzica încorporată în clipuri. Înainte de a uni loturi de mai multe clipuri împreună pentru a crea un videoclip complet de lungime arbitrară, se aplică constrângeri temporale pentru a asigura consistența temporală.
Ieșiri de muzică pentru dans proaspăt generate
Limitările temporale și spațiale arbitrare sunt susținute de EDGE. Există numeroase aplicații pentru utilizatorii finali care pot fi susținute prin aceasta, inclusiv:
- Cerând continuitate temporală în loturi de numeroase secvențe, pot fi produse dansuri de lungime arbitrară.
- Dansuri care includ restricții articulare, cum ar fi mișcarea inferioară a corpului care provoacă generarea superioară a corpului sau invers.
- Dansuri cu mișcări de început și de sfârșit care sunt prestabilite.
- Dansurile care încep cu o mișcare predeterminată sunt cunoscute sub denumirea de continuare a dansului.
Cercetătorii au descoperit că observatorii umani au preferat în mod covârșitor dansurile generate de algoritmul EDGE celor generate de alți algoritmi. Autorii studiului spun că algoritmul EDGE reprezintă un progres major în domeniul dansului generat de computer. Ei cred că algoritmul ar putea fi folosit pentru a crea dansuri pentru lumea reală și evenimente virtuale, cum ar fi tendințele sociale și TikTok, nunți, petreceri sau funcții corporative.
Citiți mai multe despre AI:
Declinare a responsabilităţii
În conformitate cu Ghidurile proiectului Trust, vă rugăm să rețineți că informațiile furnizate pe această pagină nu sunt destinate și nu trebuie interpretate ca fiind consiliere juridică, fiscală, investițională, financiară sau orice altă formă de consiliere. Este important să investești doar ceea ce îți poți permite să pierzi și să cauți sfaturi financiare independente dacă ai îndoieli. Pentru informații suplimentare, vă sugerăm să consultați termenii și condițiile, precum și paginile de ajutor și asistență furnizate de emitent sau agent de publicitate. MetaversePost se angajează să raporteze corecte, imparțial, dar condițiile de piață pot fi modificate fără notificare.
Despre autor
Damir este liderul echipei, manager de produs și editor la Metaverse Post, care acoperă subiecte precum AI/ML, AGI, LLM-uri, Metaverse și Web3-domenii conexe. Articolele sale atrag o audiență masivă de peste un milion de utilizatori în fiecare lună. El pare a fi un expert cu 10 ani de experiență în SEO și marketing digital. Damir a fost menționat în Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto și alte publicații. Călătorește între Emiratele Arabe Unite, Turcia, Rusia și CSI ca nomad digital. Damir a obținut o diplomă de licență în fizică, despre care crede că i-a oferit abilitățile de gândire critică necesare pentru a avea succes în peisajul în continuă schimbare al internetului.
Mai multe articole
Damir este liderul echipei, manager de produs și editor la Metaverse Post, care acoperă subiecte precum AI/ML, AGI, LLM-uri, Metaverse și Web3-domenii conexe. Articolele sale atrag o audiență masivă de peste un milion de utilizatori în fiecare lună. El pare a fi un expert cu 10 ani de experiență în SEO și marketing digital. Damir a fost menționat în Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto și alte publicații. Călătorește între Emiratele Arabe Unite, Turcia, Rusia și CSI ca nomad digital. Damir a obținut o diplomă de licență în fizică, despre care crede că i-a oferit abilitățile de gândire critică necesare pentru a avea succes în peisajul în continuă schimbare al internetului.
