Music-to-Dance: EDGE AI genera un numero infinito di idee di danza per TikTok in base all'input audio
In Breve
EDGE: il software di coreografia generato dall'intelligenza artificiale che sta cambiando il mondo della danza
L'Università di Stanford ha ha annunciato una potente intelligenza artificiale da musica a danza che genera danza dall'input audio chiamato EDGE. EDGE è un potente metodo per la creazione di danze personalizzabili in grado di produrre danze fisicamente credibili e realistiche aderendo a qualsiasi musica fornita. Con l'aiuto di Jukebox, un potente estrattore di caratteristiche musicali e un modello di diffusione basato su trasformatore, EDGE offre potenti capacità di editing ideali per la danza, come il condizionamento articolare, il movimento intermedio e la continuazione della danza. Scopre che i valutatori umani favoriscono notevolmente i balli generati da EDGE rispetto agli approcci recenti come Bailando e FATTO.
Dalla musica alla coreografia: come EDGE genera le sue danze
Anche per campioni musicali trovati in natura, EDGE può produrre balli di alta qualità utilizzando incorporamenti musicali dal robusto modello Jukebox. Un modello Jukebox congelato viene utilizzato da EDGE per incorporare la musica in ingresso. Una serie di clip di danza di cinque secondi viene utilizzata per insegnare un condizionale modello di diffusione come mappare la musica incorporata nelle clip. Prima di unire insieme batch di più clip per creare un video completo di lunghezza arbitraria, vengono applicati vincoli temporali per garantire la coerenza temporale.
Uscite da musica a danza appena generate
Limitazioni temporali e spaziali arbitrarie sono supportate da EDGE. Esistono numerose applicazioni per l'utente finale che possono essere supportate da questo, tra cui:
- Richiedendo continuità temporale tra lotti di numerose sequenze, è possibile produrre danze di lunghezza arbitraria.
- Danze che includono restrizioni articolari, come il movimento della parte inferiore del corpo che causa la generazione della parte superiore del corpo, o il contrario.
- Balla con mosse iniziali e finali predeterminate.
- I balli che iniziano con un movimento predeterminato sono noti come continuazioni di danza.
I ricercatori hanno scoperto che gli osservatori umani preferivano in modo schiacciante i balli generati dall'algoritmo EDGE a quelli generati da altri algoritmi. Gli autori dello studio affermano che l'algoritmo EDGE rappresenta un importante progresso nel campo della danza generata al computer. Credono che l'algoritmo potrebbe essere utilizzato per creare balli per il mondo reale e eventi virtuali, come tendenze social e TikTok, matrimoni, feste o funzioni aziendali.
Per saperne di più sull'intelligenza artificiale:
Negazione di responsabilità
In linea con la Linee guida del progetto Trust, si prega di notare che le informazioni fornite in questa pagina non intendono essere e non devono essere interpretate come consulenza legale, fiscale, di investimento, finanziaria o di qualsiasi altra forma. È importante investire solo ciò che puoi permetterti di perdere e chiedere una consulenza finanziaria indipendente in caso di dubbi. Per ulteriori informazioni, suggeriamo di fare riferimento ai termini e alle condizioni nonché alle pagine di aiuto e supporto fornite dall'emittente o dall'inserzionista. MetaversePost si impegna a fornire report accurati e imparziali, ma le condizioni di mercato sono soggette a modifiche senza preavviso.
Circa l'autore
Damir è il team leader, il product manager e l'editore di Metaverse Post, che copre argomenti come AI/ML, AGI, LLM, Metaverse e Web3campi correlati. I suoi articoli attirano un vasto pubblico di oltre un milione di utenti ogni mese. Sembra essere un esperto con 10 anni di esperienza in SEO e marketing digitale. Damir è stato menzionato in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto e altre pubblicazioni. Viaggia tra Emirati Arabi Uniti, Turchia, Russia e CSI come nomade digitale. Damir ha conseguito una laurea in fisica, che secondo lui gli ha fornito le capacità di pensiero critico necessarie per avere successo nel panorama in continua evoluzione di Internet.
Altri articoli
Damir è il team leader, il product manager e l'editore di Metaverse Post, che copre argomenti come AI/ML, AGI, LLM, Metaverse e Web3campi correlati. I suoi articoli attirano un vasto pubblico di oltre un milione di utenti ogni mese. Sembra essere un esperto con 10 anni di esperienza in SEO e marketing digitale. Damir è stato menzionato in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto e altre pubblicazioni. Viaggia tra Emirati Arabi Uniti, Turchia, Russia e CSI come nomade digitale. Damir ha conseguito una laurea in fisica, che secondo lui gli ha fornito le capacità di pensiero critico necessarie per avere successo nel panorama in continua evoluzione di Internet.
