Muzika į šokius: EDGE AI generuoja begalę šokių idėjų, skirtų TikTok, remiantis garso įvestimi
Trumpai
EDGE: DI sukurta choreografijos programinė įranga, kuri keičia šokių pasaulį
Stanfordo universitetas turi paskelbė galingas muzikos ir šokio AI, kuris generuoja šokį iš garso įvesties, vadinamos EDGE. EDGE yra galingas pritaikyto šokio kūrimo metodas, leidžiantis sukurti fiziškai tikėtinus, tikroviškus šokius, laikantis bet kokios pateikiamos muzikos. Naudodamas „Jukebox“, galingą muzikos funkcijų ištraukiklį ir transformatoriaus pagrindu sukurtą difuzijos modelį, EDGE siūlo galingas redagavimo galimybes, kurios idealiai tinka šokiui, pvz., sąnarių kondicionavimą, judesių tarpinį judėjimą ir šokio tęsimą. Jis atskleidžia, kad vertintojai labai palankiai vertina EDGE sukurtus šokius, palyginti su tokiais naujausiais metodais kaip Šokiai ir FAKTAS.
Nuo muzikos iki choreografijos: kaip EDGE generuoja savo šokius
Net ir gamtoje aptinkamiems muzikos pavyzdžiams EDGE gali sukurti aukštos kokybės šokius, naudodamas muzikos įterpimus iš tvirto Jukebox modelio. EDGE naudoja šaldytą Jukebox modelį, kad įtrauktų įvesties muziką. Sąlyginiam mokymui naudojama penkių sekundžių trukmės šokio klipų serija difuzijos modelis kaip susieti muziką, įterptą į klipus. Prieš sujungiant kelių klipų paketus, kad būtų sukurtas savavališko ilgio viso vaizdo įrašas, taikomi laiko apribojimai, siekiant užtikrinti laikinį nuoseklumą.
Šviežiai sukurti muzikos ir šokio išėjimai
EDGE palaiko savavališkus laiko ir erdvės apribojimus. Tai gali palaikyti daugybę galutinio vartotojo programų, įskaitant:
- Reikalaujant laiko tęstinumo daugybės sekų partijose, galima sukurti savavališko ilgio šokius.
- Šokiai, apimantys sąnarių apribojimus, pvz., apatinės kūno dalies judesiai, sukeliantys viršutinės kūno dalies generavimą, arba atvirkščiai.
- Šokiai su pradžios ir pabaigos judesiais, kurie yra iš anksto nustatyti.
- Šokiai, kurie prasideda iš anksto nustatytu judesiu, yra žinomi kaip šokio tęsiniai.
Tyrėjai nustatė, kad žmonių stebėtojai daugiausia pirmenybę teikia šokiams, generuojamiems EDGE algoritmo, o ne kitų algoritmų generuojamiems šokiams. Tyrimo autoriai teigia, kad EDGE algoritmas yra didelė pažanga kompiuterinio šokio srityje. Jie tiki, kad šis algoritmas gali būti naudojamas kuriant šokius realiame pasaulyje ir virtualūs įvykiai, pvz., socialines ir „TikTok“ tendencijas, vestuves, vakarėlius ar įmonės funkcijas.
Skaitykite daugiau apie AI:
Atsakomybės neigimas
Remdamasi tuo, Pasitikėjimo projekto gairės, atkreipkite dėmesį, kad šiame puslapyje pateikta informacija nėra skirta ir neturėtų būti aiškinama kaip teisinė, mokesčių, investicinė, finansinė ar bet kokia kita konsultacija. Svarbu investuoti tik tai, ką galite sau leisti prarasti, ir, jei turite kokių nors abejonių, kreiptis į nepriklausomą finansinę konsultaciją. Norėdami gauti daugiau informacijos, siūlome peržiūrėti taisykles ir nuostatas bei pagalbos ir palaikymo puslapius, kuriuos pateikia išdavėjas arba reklamuotojas. MetaversePost yra įsipareigojusi teikti tikslias, nešališkas ataskaitas, tačiau rinkos sąlygos gali keistis be įspėjimo.
Apie autorių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
Daugiau straipsnių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
