Music-to-Dance: EDGE AI generuje nekonečné množstvo tanečných nápadov pre TikTok na základe audio vstupu
Stručne
EDGE: Choreografický softvér generovaný AI, ktorý mení tanečný svet
Stanfordská univerzita má oznámila, výkonná umelá inteligencia pre hudbu k tancu, ktorá generuje tanec zo zvukového vstupu s názvom EDGE. EDGE je účinná metóda pre prispôsobiteľnú tanečnú tvorbu, ktorá dokáže produkovať fyzicky vierohodné, realistické tance pri dodržiavaní akejkoľvek dodanej hudby. S pomocou Jukeboxu, účinného extraktora hudobných funkcií, a modelu difúzie založeného na transformátore, EDGE ponúka výkonné editačné možnosti, ktoré sú ideálne pre tanec, ako napríklad spoločné kondicionovanie, pohyb v medziach a pokračovanie tanca. Zisťuje, že ľudskí hodnotitelia veľmi uprednostňujú tance generované EDGE v porovnaní s nedávnymi prístupmi, ako je Bailando a FAKT.
Od hudby k choreografii: Ako EDGE generuje svoje tance
Dokonca aj pre hudobné vzorky nájdené vo voľnej prírode dokáže EDGE produkovať vysokokvalitné tance s použitím hudobných vložiek z robustného modelu Jukebox. Zamrznutý model Jukebox používa EDGE na začlenenie vstupnej hudby. Séria päťsekundových tanečných klipov sa používa na výučbu podmienku difúzny model ako mapovať hudbu vloženú do klipov. Pred spojením dávok viacerých klipov, aby sa vytvorilo celé video ľubovoľnej dĺžky, sa použijú časové obmedzenia, aby sa zabezpečila časová konzistentnosť.
Čerstvo vygenerované tanečné výstupy
EDGE podporuje ľubovoľné časové a priestorové obmedzenia. Existuje množstvo aplikácií pre koncových používateľov, ktoré to môže podporovať, vrátane:
- Požadovaním časovej kontinuity naprieč dávkami mnohých sekvencií je možné vytvoriť tance ľubovoľnej dĺžky.
- Tance, ktoré zahŕňajú obmedzenia kĺbov, ako napríklad pohyb dolnej časti tela spôsobujúci tvorbu hornej časti tela alebo naopak.
- Tance so začiatočnými a koncovými pohybmi, ktoré sú vopred určené.
- Tance, ktoré začínajú vopred určeným pohybom, sú známe ako tanečné pokračovania.
Výskumníci zistili, že ľudskí pozorovatelia v drvivej väčšine preferovali tance generované algoritmom EDGE pred tancami generovanými inými algoritmami. Autori štúdie tvrdia, že algoritmus EDGE predstavuje veľký pokrok v oblasti počítačom generovaného tanca. Veria, že tento algoritmus by sa dal použiť na vytvorenie tancov pre skutočný svet a virtuálne udalosti, ako sú spoločenské a TikTok trendy, svadby, večierky alebo firemné akcie.
Prečítajte si viac o AI:
Vylúčenie zodpovednosti
V súlade s Pokyny k projektu Trust, uvedomte si, že informácie uvedené na tejto stránke nie sú zamýšľané a nemali by byť interpretované ako právne, daňové, investičné, finančné alebo iné formy poradenstva. Je dôležité investovať len toľko, koľko si môžete dovoliť stratiť a v prípade akýchkoľvek pochybností vyhľadať nezávislé finančné poradenstvo. Ak chcete získať ďalšie informácie, odporúčame vám pozrieť si zmluvné podmienky, ako aj stránky pomoci a podpory poskytnuté vydavateľom alebo inzerentom. MetaversePost sa zaviazala poskytovať presné a nezaujaté správy, ale podmienky na trhu sa môžu zmeniť bez upozornenia.
O autorovi
Damir je vedúci tímu, produktový manažér a redaktor v Metaverse Post, pokrývajúce témy ako AI/ML, AGI, LLM, Metaverse a Web3- súvisiace oblasti. Jeho články priťahujú každý mesiac obrovské publikum s viac ako miliónom používateľov. Zdá sa, že je odborníkom s 10-ročnými skúsenosťami v oblasti SEO a digitálneho marketingu. Damir bol spomenutý v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a ďalšie publikácie. Ako digitálny nomád cestuje medzi SAE, Tureckom, Ruskom a SNŠ. Damir získal bakalársky titul z fyziky, o ktorom sa domnieva, že mu dal schopnosti kritického myslenia potrebné na to, aby bol úspešný v neustále sa meniacom prostredí internetu.
Ďalšie články
Damir je vedúci tímu, produktový manažér a redaktor v Metaverse Post, pokrývajúce témy ako AI/ML, AGI, LLM, Metaverse a Web3- súvisiace oblasti. Jeho články priťahujú každý mesiac obrovské publikum s viac ako miliónom používateľov. Zdá sa, že je odborníkom s 10-ročnými skúsenosťami v oblasti SEO a digitálneho marketingu. Damir bol spomenutý v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a ďalšie publikácie. Ako digitálny nomád cestuje medzi SAE, Tureckom, Ruskom a SNŠ. Damir získal bakalársky titul z fyziky, o ktorom sa domnieva, že mu dal schopnosti kritického myslenia potrebné na to, aby bol úspešný v neustále sa meniacom prostredí internetu.
