Music-to-Dance: Ang EDGE AI ay bumubuo ng walang katapusang bilang ng mga ideya sa sayaw para sa TikTok batay sa audio input
Sa madaling sabi
EDGE: Ang AI Generated Choreography Software na Binabago ang Mundo ng Sayaw
Ang Stanford University ay mayroon anunsyado isang malakas na music-to-dance AI na bumubuo ng sayaw mula sa audio input na tinatawag na EDGE. Ang EDGE ay isang mabisang paraan para sa nako-customize na paglikha ng sayaw na maaaring gumawa ng pisikal na kapani-paniwala, makatotohanang mga sayaw habang sumusunod sa anumang ibinigay na musika. Sa tulong ng Jukebox, isang makapangyarihang music feature extractor, at transformer-based diffusion model, nag-aalok ang EDGE ng malalakas na kakayahan sa pag-edit na perpekto para sa sayaw, gaya ng joint-wise conditioning, motion in-betweening, at dance continuation. Natuklasan nito na ang mga taga-rate ng tao ay lubos na pinapaboran ang mga sayaw na ginawa ng EDGE kung ihahambing sa mga kamakailang diskarte tulad ng Bailando at KATOTOHANAN.
Mula sa Musika hanggang sa Choreography: Paano Binubuo ng EDGE ang Mga Sayaw Nito
Kahit na para sa mga sample ng musika na matatagpuan sa ligaw, ang EDGE ay makakagawa ng mga de-kalidad na sayaw gamit ang mga pag-embed ng musika mula sa mahusay na modelo ng Jukebox. Ang isang nakapirming modelo ng Jukebox ay ginagamit ng EDGE upang isama ang input ng musika. Isang serye ng limang segundong dance clip ang ginagamit upang magturo ng isang kondisyon modelo ng pagsasabog kung paano i-map ang musikang naka-embed sa mga clip. Bago pagsama-samahin ang mga batch ng maraming clip upang lumikha ng isang arbitraryong haba na buong video, inilalapat ang mga temporal na paghihigpit upang matiyak ang temporal na pagkakapare-pareho.
Mga bagong nabuong music-to-dance na output
Ang di-makatwirang temporal at spatial na mga limitasyon ay sinusuportahan ng EDGE. Mayroong maraming mga end-user na application na maaaring suportahan nito, kabilang ang:
- Sa pamamagitan ng pag-aatas ng temporal na pagpapatuloy sa mga batch ng maraming pagkakasunud-sunod, maaaring magawa ang mga arbitrary-length na sayaw.
- Mga sayaw na may kasamang mga paghihigpit sa magkasanib na bahagi, tulad ng paggalaw sa ibabang bahagi ng katawan na nagdudulot ng pagbuo ng itaas na katawan, o ang kabaligtaran.
- Mga sayaw na may simula at nagtatapos na mga galaw na paunang natukoy.
- Ang mga sayaw na nagsisimula sa isang paunang natukoy na galaw ay kilala bilang mga pagpapatuloy ng sayaw.
Natuklasan ng mga mananaliksik na ang mga taong nagmamasid ay labis na ginusto ang mga sayaw na nabuo ng EDGE algorithm kaysa sa mga nabuo ng iba pang mga algorithm. Ang mga may-akda ng pag-aaral ay nagsasabi na ang EDGE algorithm ay kumakatawan sa isang malaking pagsulong sa larangan ng computer-generated na sayaw. Naniniwala sila na ang algorithm ay maaaring gamitin upang lumikha ng mga sayaw para sa totoong mundo at virtual na mga kaganapan, gaya ng mga social at TikTok trend, kasalan, party, o corporate functions.
Magbasa pa tungkol sa AI:
Pagtanggi sa pananagutan
Sa linya na may Mga alituntunin ng Trust Project, pakitandaan na ang impormasyong ibinigay sa pahinang ito ay hindi nilayon at hindi dapat bigyang-kahulugan bilang legal, buwis, pamumuhunan, pananalapi, o anumang iba pang paraan ng payo. Mahalagang mamuhunan lamang kung ano ang maaari mong mawala at humingi ng independiyenteng payo sa pananalapi kung mayroon kang anumang mga pagdududa. Para sa karagdagang impormasyon, iminumungkahi naming sumangguni sa mga tuntunin at kundisyon pati na rin sa mga pahina ng tulong at suporta na ibinigay ng nagbigay o advertiser. MetaversePost ay nakatuon sa tumpak, walang pinapanigan na pag-uulat, ngunit ang mga kondisyon ng merkado ay maaaring magbago nang walang abiso.
Tungkol sa Ang May-akda
Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet.
Mas marami pang artikuloSi Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet.