Novinky Technika
Listopadu 23, 2022

Music-to-Dance: EDGE AI generuje nekonečné množství tanečních nápadů pro TikTok na základě audio vstupu

Stručně

EDGE: Choreografický software generovaný umělou inteligencí, který mění taneční svět

Stanfordská univerzita má oznámila, výkonná umělá inteligence pro hudbu k tanci, která generuje tanec ze zvukového vstupu zvaného EDGE. EDGE je účinná metoda pro přizpůsobitelné taneční kreace, která dokáže produkovat fyzicky uvěřitelné, realistické tance při zachování jakékoli dodávané hudby. S pomocí Jukeboxu, účinného extraktoru hudebních funkcí, a modelu difúze založeného na transformátoru, EDGE nabízí výkonné editační možnosti, které jsou ideální pro tanec, jako je společné kondicionování, pohyb v mezidobí a pokračování v tanci. Zjišťuje, že lidští hodnotitelé velmi upřednostňují tance generované EDGE ve srovnání s nedávnými přístupy, jako je Bailando a FAKT.

Music-to-Dance: EDGE AI generuje nekonečné množství tanečních nápadů pro TikTok na základě audio vstupu

Od hudby k choreografii: Jak EDGE generuje své tance

Dokonce i pro hudební ukázky nalezené ve volné přírodě dokáže EDGE produkovat vysoce kvalitní tance pomocí hudebních vložek z robustního modelu Jukebox. Zamrzlý model Jukeboxu používá EDGE k začlenění vstupní hudby. Série pětisekundových tanečních klipů se používá k výuce kondicionálu difuzní model jak mapovat hudbu vloženou do klipů. Před spojením dávek více klipů k vytvoření plného videa libovolné délky se použijí časová omezení, aby byla zajištěna časová konzistence.

Od hudby k choreografii: Jak EDGE generuje své tance
EDGE je trénován na 5sekundových tanečních klipech, ale umístěním časových omezení na dávky sekvencí je schopen vytvářet tance libovolné délky. Na obrázku EDGE vynutí, aby první polovina každé sekvence odpovídala druhé polovině té před ní.

Čerstvě generované hudební výstupy

EDGE podporuje libovolná časová a prostorová omezení. Existuje mnoho aplikací pro koncové uživatele, které mohou být podporovány, včetně:

  • Požadováním časové kontinuity napříč dávkami četných sekvencí lze vytvářet tance libovolné délky.
  • Tance, které zahrnují omezení kloubů, jako je pohyb dolní části těla způsobující generování horní části těla nebo naopak.
  • Tančí s předem danými pohyby na začátku a na konci.
  • Tance, které začínají předem určeným pohybem, jsou známé jako taneční pokračování.
V tanci převládá komplexní, záměrný, klouzavý kontakt nohy se zemí. Nová ztráta konzistence kontaktu, která výrazně zlepšuje fyzický realismus při zachování klouzání, umožňuje EDGE naučit se, kdy by nohy měly a neměly klouzat.

Výzkumníci zjistili, že lidští pozorovatelé v drtivé většině preferovali tance generované algoritmem EDGE před těmi, které generovaly jiné algoritmy. Autoři studie tvrdí, že algoritmus EDGE představuje velký pokrok v oblasti počítačově generovaného tance. Věří, že algoritmus by mohl být použit k vytvoření tanců pro skutečný svět a virtuální události, jako jsou společenské a TikTok trendy, svatby, večírky nebo firemní akce.

Přečtěte si více o AI:

Odmítnutí odpovědnosti

V souladu s Pokyny k projektu Trust, prosím vezměte na vědomí, že informace uvedené na této stránce nejsou určeny a neměly by být vykládány jako právní, daňové, investiční, finanční nebo jakékoli jiné formy poradenství. Je důležité investovat jen to, co si můžete dovolit ztratit, a v případě pochybností vyhledat nezávislé finanční poradenství. Pro další informace doporučujeme nahlédnout do smluvních podmínek a také na stránky nápovědy a podpory poskytnuté vydavatelem nebo inzerentem. MetaversePost se zavázala poskytovat přesné a nezaujaté zprávy, ale podmínky na trhu se mohou bez upozornění změnit.

O autorovi

Damir je vedoucí týmu, produktový manažer a editor ve společnosti Metaverse Post, pokrývající témata jako AI/ML, AGI, LLM, Metaverse a Web3- související obory. Jeho články přitahují každý měsíc masivní publikum čítající více než milion uživatelů. Jeví se jako odborník s 10 lety zkušeností v oblasti SEO a digitálního marketingu. Damir byl zmíněn v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a další publikace. Jako digitální nomád cestuje mezi SAE, Tureckem, Ruskem a SNS. Damir získal bakalářský titul z fyziky, o kterém se domnívá, že mu dal dovednosti kritického myšlení potřebné k úspěchu v neustále se měnícím prostředí internetu. 

Další články
Damir Yalalov
Damir Yalalov

Damir je vedoucí týmu, produktový manažer a editor ve společnosti Metaverse Post, pokrývající témata jako AI/ML, AGI, LLM, Metaverse a Web3- související obory. Jeho články přitahují každý měsíc masivní publikum čítající více než milion uživatelů. Jeví se jako odborník s 10 lety zkušeností v oblasti SEO a digitálního marketingu. Damir byl zmíněn v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a další publikace. Jako digitální nomád cestuje mezi SAE, Tureckem, Ruskem a SNS. Damir získal bakalářský titul z fyziky, o kterém se domnívá, že mu dal dovednosti kritického myšlení potřebné k úspěchu v neustále se měnícím prostředí internetu. 

Hot Stories
Připojte se k našemu zpravodaji.
Novinky

Od zvlnění k velké zelené DAO: Jak kryptoměnové projekty přispívají k charitě

Pojďme prozkoumat iniciativy využívající potenciál digitálních měn pro charitativní účely.

Vědět více

AlphaFold 3, Med-Gemini a další: The Way AI Transforms Healthcare in 2024

Umělá inteligence se ve zdravotnictví projevuje různými způsoby, od odhalování nových genetických korelací až po posílení robotických chirurgických systémů...

Vědět více
Připojte se k naší komunitě inovativních technologií
Více
Dozvědět se více
Pyth Network zavádí Pull Oracle na Solana a umožňuje vývojářům přístup k cenám Oracle
Novinky Technika
Pyth Network zavádí Pull Oracle na Solana a umožňuje vývojářům přístup k cenám Oracle
Června 17, 2024
Aethir's AI and Gaming Partners To Airdrop Tokeny do svých držitelů kontrolních uzlů
Featured Novinky Technika
Aethir's AI and Gaming Partners To Airdrop Tokeny do svých držitelů kontrolních uzlů
Června 17, 2024
Společnost Notional Finance plně ukončí podporu V2 do konce července, vyzývá uživatele, aby přešli na V3
Novinky Technika
Společnost Notional Finance plně ukončí podporu V2 do konce července, vyzývá uživatele, aby přešli na V3
Června 17, 2024
Tether spouští Alloy platformu podporovanou Tether Gold a představuje první token aUSD₮
Trhy Novinky Technika
Tether spouští Alloy platformu podporovanou Tether Gold a představuje první token aUSD₮
Června 17, 2024
CRYPTOMERIA LABS PTE. LTD.