Zene-tánc: Az EDGE AI végtelen számú táncötletet generál a TikTok számára hangbemenet alapján
Röviden
EDGE: A mesterséges intelligencia által generált koreográfiai szoftver, amely megváltoztatja a tánc világát
A Stanford Egyetem rendelkezik bejelentés egy erőteljes zene-tánc AI, amely táncot generál az EDGE nevű audiobemenetről. Az EDGE egy hatékony módszer a testreszabható táncalkotáshoz, amely fizikailag hihető, valósághű táncokat tud produkálni, miközben bármilyen mellékelt zenét követ. A Jukebox, egy erőteljes zenei funkció kivonó és a transzformátor alapú diffúziós modell segítségével az EDGE olyan erőteljes szerkesztési lehetőségeket kínál, amelyek ideálisak a tánchoz, mint például az ízületek szerinti kondicionálás, a köztes mozgás és a tánc folytatása. Felfedezi, hogy az emberi értékelők nagymértékben részesítik előnyben az EDGE által generált táncokat, összehasonlítva a közelmúltbeli megközelítésekkel, például Bailando és TÉNY.
Zenétől a koreográfiáig: Hogyan generálja táncait az EDGE
Az EDGE még a vadonban talált zenei minták esetében is kiváló minőségű táncokat tud előállítani a robusztus Jukebox modell zenei beágyazásával. Az EDGE egy fagyasztott Jukebox modellt használ a bemeneti zene beépítésére. Öt másodperces táncklipek sorozatát használják a feltételes tanításra diffúziós modell hogyan lehet leképezni a klipekbe ágyazott zenét. Mielőtt több klip kötegeit egyesítené egy tetszőleges hosszúságú teljes videó létrehozásához, időbeli megszorításokat alkalmazunk az időbeli konzisztencia biztosítása érdekében.
Frissen generált zene-tánc kimenetek
Az EDGE támogatja az önkényes időbeli és térbeli korlátozásokat. Számos végfelhasználói alkalmazás támogatható ezzel, többek között:
- Azáltal, hogy időbeli folytonosságot követelünk meg számos szekvencia kötegében, tetszőleges hosszúságú táncokat lehet előállítani.
- Olyan táncok, amelyek ízületi korlátozásokat tartalmaznak, például az alsó test mozgását, ami a felsőtest generálását okozza, vagy ennek ellenkezője.
- Előre meghatározott kezdő és befejező mozdulatokkal táncol.
- Azokat a táncokat, amelyek előre meghatározott mozdulattal kezdődnek, táncfolytatásoknak nevezzük.
A kutatók azt találták, hogy az emberi megfigyelők túlnyomórészt az EDGE algoritmus által generált táncokat részesítették előnyben, mint más algoritmusok által generált táncokat. A tanulmány szerzői szerint az EDGE algoritmus jelentős előrelépést jelent a számítógéppel generált tánc területén. Úgy vélik, hogy az algoritmus felhasználható táncok létrehozására valós és virtuális események, mint például a közösségi és TikTok trendek, esküvők, bulik vagy vállalati rendezvények.
Tudjon meg többet az AI-ról:
A felelősség megtagadása
Összhangban a A Trust Project irányelvei, kérjük, vegye figyelembe, hogy az ezen az oldalon közölt információk nem minősülnek jogi, adózási, befektetési, pénzügyi vagy bármilyen más formájú tanácsnak, és nem is értelmezhetők. Fontos, hogy csak annyit fektessen be, amennyit megengedhet magának, hogy elveszítsen, és kérjen független pénzügyi tanácsot, ha kétségei vannak. További információkért javasoljuk, hogy tekintse meg a szerződési feltételeket, valamint a kibocsátó vagy hirdető által biztosított súgó- és támogatási oldalakat. MetaversePost elkötelezett a pontos, elfogulatlan jelentéstétel mellett, de a piaci feltételek előzetes értesítés nélkül változhatnak.
A szerzőről
Damir a csapat vezetője, termékmenedzsere és szerkesztője Metaverse Post, olyan témákkal foglalkozik, mint az AI/ML, AGI, LLMs, Metaverse és Web3- kapcsolódó mezők. Cikkei havonta több mint egymillió felhasználót vonzanak. Úgy tűnik, szakértő, aki 10 éves tapasztalattal rendelkezik a SEO és a digitális marketing területén. Damirt a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto és más kiadványok. Digitális nomádként utazik az Egyesült Arab Emírségek, Törökország, Oroszország és a FÁK között. Damir fizikából szerzett bachelor-diplomát, és úgy gondolja, hogy ez megadta neki azokat a kritikus gondolkodási készségeket, amelyek szükségesek ahhoz, hogy sikeres legyen az internet folyamatosan változó táján.
További cikkek
Damir a csapat vezetője, termékmenedzsere és szerkesztője Metaverse Post, olyan témákkal foglalkozik, mint az AI/ML, AGI, LLMs, Metaverse és Web3- kapcsolódó mezők. Cikkei havonta több mint egymillió felhasználót vonzanak. Úgy tűnik, szakértő, aki 10 éves tapasztalattal rendelkezik a SEO és a digitális marketing területén. Damirt a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto és más kiadványok. Digitális nomádként utazik az Egyesült Arab Emírségek, Törökország, Oroszország és a FÁK között. Damir fizikából szerzett bachelor-diplomát, és úgy gondolja, hogy ez megadta neki azokat a kritikus gondolkodási készségeket, amelyek szükségesek ahhoz, hogy sikeres legyen az internet folyamatosan változó táján.
