Ziņojums Tehnoloģija
Novembris 23, 2022

Mūzika dejā: EDGE AI ģenerē bezgalīgi daudz deju ideju priekš TikTok, pamatojoties uz audio ievadi

Īsumā

EDGE: AI radītā horeogrāfijas programmatūra, kas maina dejas pasauli

Stenfordas universitātē ir paziņoja jaudīgs mākslīgais intelekts no mūzikas uz deju, kas ģenerē deju no audio ieejas, ko sauc par EDGE. EDGE ir spēcīga metode pielāgojamai deju radīšanai, kas var radīt fiziski ticamas, reālistiskas dejas, vienlaikus ievērojot jebkuru piedāvāto mūziku. Izmantojot Jukebox, spēcīgu mūzikas funkciju nosūcēju un uz transformatoriem balstītu difūzijas modeli, EDGE piedāvā jaudīgas rediģēšanas iespējas, kas ir ideāli piemērotas dejām, piemēram, locītavu regulēšanu, kustību starplaikā un dejas turpinājumu. Tas atklāj, ka cilvēku vērtētāji ļoti atbalsta EDGE radītās dejas, salīdzinot ar tādām nesenām pieejām kā Dejas un FAKTS.

Mūzika dejā: EDGE AI ģenerē bezgalīgi daudz deju ideju priekš TikTok, pamatojoties uz audio ievadi

No mūzikas līdz horeogrāfijai: kā EDGE ģenerē savas dejas

Pat savvaļā atrodamiem mūzikas paraugiem EDGE var radīt augstas kvalitātes dejas, izmantojot mūzikas iegulšanu no spēcīgā Jukebox modeļa. EDGE izmanto iesaldētu Jukebox modeli, lai iekļautu mūzikas ievadi. Nosacītības mācīšanai tiek izmantota piecu sekunžu deju klipu sērija difūzijas modelis kā kartēt klipos iegulto mūziku. Pirms vairāku klipu pakešu apvienošanas, lai izveidotu patvaļīga garuma pilnu videoklipu, tiek piemēroti laika ierobežojumi, lai nodrošinātu laika konsekvenci.

No mūzikas līdz horeogrāfijai: kā EDGE ģenerē savas dejas
EDGE ir apmācīts uz 5 sekunžu deju klipiem, taču, uzliekot laika ierobežojumus sekvenču partijām, tas spēj radīt jebkura garuma dejas. Ilustrācijā EDGE piespiež katras secības pirmo pusi, lai tā atbilstu iepriekšējās secības otrajai pusei.

Svaigi ģenerēti mūzikas-deju izvadi

EDGE atbalsta patvaļīgus laika un telpiskos ierobežojumus. Tas var atbalstīt daudzas galalietotāju lietojumprogrammas, tostarp:

  • Pieprasot laika nepārtrauktību daudzu secību partijās, var radīt patvaļīgas garuma dejas.
  • Dejas, kas ietver locītavu ierobežojumus, piemēram, ķermeņa lejasdaļas kustības, kas izraisa ķermeņa augšdaļas ģenerēšanu, vai pretēji.
  • Dejas ar sākuma un beigu kustībām, kas ir iepriekš noteiktas.
  • Dejas, kas sākas ar iepriekš noteiktu kustību, sauc par deju turpinājumiem.
Sarežģīts, apzināts, slīdošs pēdas-zemes kontakts ir izplatīts dejā. Jaunais kontaktu konsekvences zudums, kas ievērojami uzlabo fizisko reālismu, vienlaikus saglabājot slīdēšanu, ļauj EDGE uzzināt, kad kājām vajadzētu slīdēt un kad nevajadzētu.

Pētnieki atklāja, ka cilvēku novērotāji pārsvarā deva priekšroku dejām, kuras ģenerē EDGE algoritms, nevis citu algoritmu radītajām dejām. Pētījuma autori saka, ka EDGE algoritms ir liels sasniegums datorizētās dejas jomā. Viņi uzskata, ka algoritmu varētu izmantot, lai izveidotu dejas reālai pasaulei un virtuālie pasākumi, piemēram, sociālās un TikTok tendences, kāzas, ballītes vai korporatīvās funkcijas.

Lasiet vairāk par AI:

Atbildības noraidīšana

Atbilstīgi Uzticības projekta vadlīnijas, lūdzu, ņemiet vērā, ka šajā lapā sniegtā informācija nav paredzēta un to nedrīkst interpretēt kā juridisku, nodokļu, ieguldījumu, finanšu vai jebkāda cita veida padomu. Ir svarīgi ieguldīt tikai to, ko varat atļauties zaudēt, un meklēt neatkarīgu finanšu padomu, ja jums ir šaubas. Lai iegūtu papildinformāciju, iesakām skatīt pakalpojumu sniegšanas noteikumus, kā arī palīdzības un atbalsta lapas, ko nodrošina izdevējs vai reklāmdevējs. MetaversePost ir apņēmies sniegt precīzus, objektīvus pārskatus, taču tirgus apstākļi var tikt mainīti bez iepriekšēja brīdinājuma.

Par Autors

Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē. 

Vairāk rakstus
Damirs Jalalovs
Damirs Jalalovs

Damirs ir komandas vadītājs, produktu vadītājs un redaktors Metaverse Post, kas aptver tādas tēmas kā AI/ML, AGI, LLM, Metaverse un Web3- saistītie lauki. Viņa raksti katru mēnesi piesaista lielu auditoriju, kas pārsniedz miljonu lietotāju. Šķiet, ka viņš ir eksperts ar 10 gadu pieredzi SEO un digitālā mārketinga jomā. Damirs ir minēts Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto un citas publikācijas. Viņš ceļo starp AAE, Turciju, Krieviju un NVS kā digitālais nomads. Damirs ir ieguvis bakalaura grādu fizikā, kas, viņaprāt, ir devis viņam kritiskās domāšanas prasmes, kas nepieciešamas, lai gūtu panākumus nepārtraukti mainīgajā interneta vidē. 

Hot Stories
Pievienojieties mūsu informatīvajam izdevumam.
Jaunākās ziņas

Pienāk notiesāšanas diena: CZ liktenis ir līdzsvarā, jo ASV tiesa izskata DOJ lūgumu

Šodien ASV tiesā Sietlā Čanpens Džao ir gatavs notiesāt.

Uzziniet vairāk

Samourai Wallet dibinātāji tiek apsūdzēti par 2 miljardu dolāru atvieglošanu Darknet darījumos

Samourai Wallet dibinātāju bažas ir ievērojams neveiksme nozarei, uzsverot neatlaidīgo ...

Uzziniet vairāk
Pievienojieties mūsu novatoriskajai tehnoloģiju kopienai
Lasīt vairāk
Vairāk
Animoca Brands sadarbojas ar Darewise, lai uzsāktu Opal Bitcoin projektu, kas izvēršas Bitcoin valstībā
bizness Ziņojums Tehnoloģija
Animoca Brands sadarbojas ar Darewise, lai uzsāktu Opal Bitcoin projektu, kas izvēršas Bitcoin valstībā
Aprīlis 30, 2024
HashKey grupa apvieno spēkus ar GreenBTC.Club, lai sasniegtu Bosera HashKey Bitcoin ETF oglekļa neitralitāti
bizness Ziņojums Tehnoloģija
HashKey grupa apvieno spēkus ar GreenBTC.Club, lai sasniegtu Bosera HashKey Bitcoin ETF oglekļa neitralitāti
Aprīlis 30, 2024
Six Spot Bitcoin un Ether ETF debija Honkongā, uzsverot pilsētas apņemšanos vadīt kriptovalūtu tirgu
bizness Markets Stāsti un atsauksmes Tehnoloģija
Six Spot Bitcoin un Ether ETF debija Honkongā, uzsverot pilsētas apņemšanos vadīt kriptovalūtu tirgu
Aprīlis 30, 2024
EigenLayer's Airdrop Stratēģija Sparks diskusijas, kopiena apgalvo, ka negodīga marķiera piešķiršana
Markets Ziņojums Tehnoloģija
EigenLayer's Airdrop Stratēģija Sparks diskusijas, kopiena apgalvo, ka negodīga marķiera piešķiršana
Aprīlis 30, 2024
CRYPTOMERIA LABS PTE. LTD.