Music-to-Dance: EDGE AI generuje nekonečné množství tanečních nápadů pro TikTok na základě audio vstupu
Stručně
EDGE: Choreografický software generovaný umělou inteligencí, který mění taneční svět
Stanfordská univerzita má oznámila, výkonná umělá inteligence pro hudbu k tanci, která generuje tanec ze zvukového vstupu zvaného EDGE. EDGE je účinná metoda pro přizpůsobitelné taneční kreace, která dokáže produkovat fyzicky uvěřitelné, realistické tance při zachování jakékoli dodávané hudby. S pomocí Jukeboxu, účinného extraktoru hudebních funkcí, a modelu difúze založeného na transformátoru, EDGE nabízí výkonné editační možnosti, které jsou ideální pro tanec, jako je společné kondicionování, pohyb v mezidobí a pokračování v tanci. Zjišťuje, že lidští hodnotitelé velmi upřednostňují tance generované EDGE ve srovnání s nedávnými přístupy, jako je Bailando a FAKT.
Od hudby k choreografii: Jak EDGE generuje své tance
Dokonce i pro hudební ukázky nalezené ve volné přírodě dokáže EDGE produkovat vysoce kvalitní tance pomocí hudebních vložek z robustního modelu Jukebox. Zamrzlý model Jukeboxu používá EDGE k začlenění vstupní hudby. Série pětisekundových tanečních klipů se používá k výuce kondicionálu difuzní model jak mapovat hudbu vloženou do klipů. Před spojením dávek více klipů k vytvoření plného videa libovolné délky se použijí časová omezení, aby byla zajištěna časová konzistence.
Čerstvě generované hudební výstupy
EDGE podporuje libovolná časová a prostorová omezení. Existuje mnoho aplikací pro koncové uživatele, které mohou být podporovány, včetně:
- Požadováním časové kontinuity napříč dávkami četných sekvencí lze vytvářet tance libovolné délky.
- Tance, které zahrnují omezení kloubů, jako je pohyb dolní části těla způsobující generování horní části těla nebo naopak.
- Tančí s předem danými pohyby na začátku a na konci.
- Tance, které začínají předem určeným pohybem, jsou známé jako taneční pokračování.
Výzkumníci zjistili, že lidští pozorovatelé v drtivé většině preferovali tance generované algoritmem EDGE před těmi, které generovaly jiné algoritmy. Autoři studie tvrdí, že algoritmus EDGE představuje velký pokrok v oblasti počítačově generovaného tance. Věří, že algoritmus by mohl být použit k vytvoření tanců pro skutečný svět a virtuální události, jako jsou společenské a TikTok trendy, svatby, večírky nebo firemní akce.
Přečtěte si více o AI:
Odmítnutí odpovědnosti
V souladu s Pokyny k projektu Trust, prosím vezměte na vědomí, že informace uvedené na této stránce nejsou určeny a neměly by být vykládány jako právní, daňové, investiční, finanční nebo jakékoli jiné formy poradenství. Je důležité investovat jen to, co si můžete dovolit ztratit, a v případě pochybností vyhledat nezávislé finanční poradenství. Pro další informace doporučujeme nahlédnout do smluvních podmínek a také na stránky nápovědy a podpory poskytnuté vydavatelem nebo inzerentem. MetaversePost se zavázala poskytovat přesné a nezaujaté zprávy, ale podmínky na trhu se mohou bez upozornění změnit.
O autorovi
Damir je vedoucí týmu, produktový manažer a editor ve společnosti Metaverse Post, pokrývající témata jako AI/ML, AGI, LLM, Metaverse a Web3- související obory. Jeho články přitahují každý měsíc masivní publikum čítající více než milion uživatelů. Jeví se jako odborník s 10 lety zkušeností v oblasti SEO a digitálního marketingu. Damir byl zmíněn v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a další publikace. Jako digitální nomád cestuje mezi SAE, Tureckem, Ruskem a SNS. Damir získal bakalářský titul z fyziky, o kterém se domnívá, že mu dal dovednosti kritického myšlení potřebné k úspěchu v neustále se měnícím prostředí internetu.
Další články
Damir je vedoucí týmu, produktový manažer a editor ve společnosti Metaverse Post, pokrývající témata jako AI/ML, AGI, LLM, Metaverse a Web3- související obory. Jeho články přitahují každý měsíc masivní publikum čítající více než milion uživatelů. Jeví se jako odborník s 10 lety zkušeností v oblasti SEO a digitálního marketingu. Damir byl zmíněn v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a další publikace. Jako digitální nomád cestuje mezi SAE, Tureckem, Ruskem a SNS. Damir získal bakalářský titul z fyziky, o kterém se domnívá, že mu dal dovednosti kritického myšlení potřebné k úspěchu v neustále se měnícím prostředí internetu.
