Ulat sa Balita Teknolohiya
Nobyembre 23, 2022

Music-to-Dance: Ang EDGE AI ay bumubuo ng walang katapusang bilang ng mga ideya sa sayaw para sa TikTok batay sa audio input

Sa madaling sabi

EDGE: Ang AI Generated Choreography Software na Binabago ang Mundo ng Sayaw

Ang Stanford University ay mayroon anunsyado isang malakas na music-to-dance AI na bumubuo ng sayaw mula sa audio input na tinatawag na EDGE. Ang EDGE ay isang mabisang paraan para sa nako-customize na paglikha ng sayaw na maaaring gumawa ng pisikal na kapani-paniwala, makatotohanang mga sayaw habang sumusunod sa anumang ibinigay na musika. Sa tulong ng Jukebox, isang makapangyarihang music feature extractor, at transformer-based diffusion model, nag-aalok ang EDGE ng malalakas na kakayahan sa pag-edit na perpekto para sa sayaw, gaya ng joint-wise conditioning, motion in-betweening, at dance continuation. Natuklasan nito na ang mga taga-rate ng tao ay lubos na pinapaboran ang mga sayaw na ginawa ng EDGE kung ihahambing sa mga kamakailang diskarte tulad ng Bailando at KATOTOHANAN.

Music-to-Dance: Ang EDGE AI ay bumubuo ng walang katapusang bilang ng mga ideya sa sayaw para sa TikTok batay sa audio input

Mula sa Musika hanggang sa Choreography: Paano Binubuo ng EDGE ang Mga Sayaw Nito

Kahit na para sa mga sample ng musika na matatagpuan sa ligaw, ang EDGE ay makakagawa ng mga de-kalidad na sayaw gamit ang mga pag-embed ng musika mula sa mahusay na modelo ng Jukebox. Ang isang nakapirming modelo ng Jukebox ay ginagamit ng EDGE upang isama ang input ng musika. Isang serye ng limang segundong dance clip ang ginagamit upang magturo ng isang kondisyon modelo ng pagsasabog kung paano i-map ang musikang naka-embed sa mga clip. Bago pagsama-samahin ang mga batch ng maraming clip upang lumikha ng isang arbitraryong haba na buong video, inilalapat ang mga temporal na paghihigpit upang matiyak ang temporal na pagkakapare-pareho.

Mula sa Musika hanggang sa Choreography: Paano Binubuo ng EDGE ang Mga Sayaw Nito
Ang EDGE ay sinanay sa 5-segundong dance clip, ngunit sa pamamagitan ng paglalagay ng temporal na mga hadlang sa mga batch ng mga sequence, ito ay may kakayahang lumikha ng mga sayaw sa anumang haba. Sa ilustrasyon, pinipilit ng EDGE ang unang kalahati ng bawat sequence na tumugma sa ikalawang kalahati ng isa bago nito.

Mga bagong nabuong music-to-dance na output

Ang di-makatwirang temporal at spatial na mga limitasyon ay sinusuportahan ng EDGE. Mayroong maraming mga end-user na application na maaaring suportahan nito, kabilang ang:

  • Sa pamamagitan ng pag-aatas ng temporal na pagpapatuloy sa mga batch ng maraming pagkakasunud-sunod, maaaring magawa ang mga arbitrary-length na sayaw.
  • Mga sayaw na may kasamang mga paghihigpit sa magkasanib na bahagi, tulad ng paggalaw sa ibabang bahagi ng katawan na nagdudulot ng pagbuo ng itaas na katawan, o ang kabaligtaran.
  • Mga sayaw na may simula at nagtatapos na mga galaw na paunang natukoy.
  • Ang mga sayaw na nagsisimula sa isang paunang natukoy na galaw ay kilala bilang mga pagpapatuloy ng sayaw.
Ang kumplikado, sinadya, sliding foot-ground contact ay laganap sa sayaw. Ang New Contact Consistency Loss, na makabuluhang nagpapaganda ng pisikal na realismo habang pinapanatili ang pag-slide, ay nagbibigay-daan sa EDGE na malaman kung kailan dapat at hindi dapat mag-slide ang mga paa.

Natuklasan ng mga mananaliksik na ang mga taong nagmamasid ay labis na ginusto ang mga sayaw na nabuo ng EDGE algorithm kaysa sa mga nabuo ng iba pang mga algorithm. Ang mga may-akda ng pag-aaral ay nagsasabi na ang EDGE algorithm ay kumakatawan sa isang malaking pagsulong sa larangan ng computer-generated na sayaw. Naniniwala sila na ang algorithm ay maaaring gamitin upang lumikha ng mga sayaw para sa totoong mundo at virtual na mga kaganapan, gaya ng mga social at TikTok trend, kasalan, party, o corporate functions.

Magbasa pa tungkol sa AI:

Pagtanggi sa pananagutan

Sa linya na may Mga alituntunin ng Trust Project, pakitandaan na ang impormasyong ibinigay sa pahinang ito ay hindi nilayon at hindi dapat bigyang-kahulugan bilang legal, buwis, pamumuhunan, pananalapi, o anumang iba pang paraan ng payo. Mahalagang mamuhunan lamang kung ano ang maaari mong mawala at humingi ng independiyenteng payo sa pananalapi kung mayroon kang anumang mga pagdududa. Para sa karagdagang impormasyon, iminumungkahi naming sumangguni sa mga tuntunin at kundisyon pati na rin sa mga pahina ng tulong at suporta na ibinigay ng nagbigay o advertiser. MetaversePost ay nakatuon sa tumpak, walang pinapanigan na pag-uulat, ngunit ang mga kondisyon ng merkado ay maaaring magbago nang walang abiso.

Tungkol sa Ang May-akda

Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet. 

Mas marami pang artikulo
Damir Yalalov
Damir Yalalov

Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet. 

Hot Stories
Sumali sa Aming Newsletter.
Pinakabagong Balita

Dumating na ang Araw ng Pagsentensiya: Ang Kapalaran ni CZ ay Nagbabalanse habang Isinasaalang-alang ng Korte ng US ang Panawagan ng DOJ

Si Changpeng Zhao ay handang harapin ang sentensiya sa korte ng US sa Seattle ngayon.

Malaman Higit Pa

Ang Mga Tagapagtatag ng Samourai Wallet ay Inakusahan na Nagpapadali ng $2B sa Darknet Deals

Ang pangamba ng mga tagapagtatag ng Samourai Wallet ay kumakatawan sa isang kapansin-pansing pag-urong para sa industriya, na binibigyang-diin ang patuloy na ...

Malaman Higit Pa
Sumali sa Aming Innovative Tech Community
Magbasa Pa
Magbasa nang higit pa
Ang Animoca Brands ay Nakipagtulungan Sa Darewise Upang Ilunsad ang Opal Bitcoin Project, Lumalawak sa Bitcoin Realm
Negosyo Ulat sa Balita Teknolohiya
Ang Animoca Brands ay Nakipagtulungan Sa Darewise Upang Ilunsad ang Opal Bitcoin Project, Lumalawak sa Bitcoin Realm
Abril 30, 2024
Nakiisa ang HashKey Group sa GreenBTC.Club Upang Maabot ang Carbon Neutrality Para sa Bosera HashKey Bitcoin ETF
Negosyo Ulat sa Balita Teknolohiya
Nakiisa ang HashKey Group sa GreenBTC.Club Upang Maabot ang Carbon Neutrality Para sa Bosera HashKey Bitcoin ETF
Abril 30, 2024
Six Spot Bitcoin at Ether ETFs Debut sa Hong Kong, Itinatampok ang Pangako ng Lungsod sa Pamumuno sa Cryptocurrency Market
Negosyo markets Mga Kuwento at Pagsusuri Teknolohiya
Six Spot Bitcoin at Ether ETFs Debut sa Hong Kong, Itinatampok ang Pangako ng Lungsod sa Pamumuno sa Cryptocurrency Market
Abril 30, 2024
ni EigenLayer Airdrop Ang Diskarte ay Nagpapasiklab ng mga Talakayan, Ang Komunidad ay Nagpapahayag ng Hindi Makatarungang Paglalaan ng Token
markets Ulat sa Balita Teknolohiya
ni EigenLayer Airdrop Ang Diskarte ay Nagpapasiklab ng mga Talakayan, Ang Komunidad ay Nagpapahayag ng Hindi Makatarungang Paglalaan ng Token
Abril 30, 2024
CRYPTOMERIA LABS PTE. LTD.