Music-to-Dance: EDGE AI generuje nieskończoną liczbę pomysłów tanecznych dla TikTok na podstawie danych wejściowych audio
W skrócie
EDGE: oprogramowanie do choreografii generowane przez sztuczną inteligencję, które zmienia świat tańca
Uniwersytet Stanforda ma ogłosił potężna sztuczna inteligencja muzyki do tańca, która generuje taniec z wejścia audio o nazwie EDGE. EDGE to potężna metoda tworzenia dostosowywanych tańców, która może tworzyć fizycznie wiarygodne, realistyczne tańce, przy jednoczesnym przestrzeganiu dowolnej dostarczonej muzyki. Z pomocą Jukebox, potężnego ekstraktora cech muzycznych i modelu dyfuzji opartego na transformatorze, EDGE oferuje potężne możliwości edycji, które są idealne do tańca, takie jak kondycjonowanie stawów, ruch pomiędzy i kontynuacja tańca. Odkrywa, że ludzie oceniający znacznie faworyzują tańce generowane przez EDGE w porównaniu z najnowszymi podejściami, takimi jak Taniec i FAKT.
Od muzyki do choreografii: jak EDGE generuje swoje tańce
Nawet w przypadku sampli muzycznych znalezionych w naturze, EDGE może tworzyć wysokiej jakości tańce, korzystając z osadzania muzyki z solidnego modelu Jukebox. Zamrożony model Jukebox jest używany przez EDGE do włączania muzyki wejściowej. Seria pięciosekundowych klipów tanecznych służy do nauczania warunkowego model dyfuzyjny jak mapować muzykę osadzoną w klipach. Przed połączeniem partii wielu klipów w celu utworzenia pełnego filmu o dowolnej długości stosowane są ograniczenia czasowe, aby zapewnić spójność czasową.
Świeżo wygenerowane wyjścia muzyczne do tańca
Arbitralne ograniczenia czasowe i przestrzenne są obsługiwane przez EDGE. Istnieje wiele aplikacji dla użytkowników końcowych, które mogą to obsługiwać, w tym:
- Wymagając ciągłości czasowej w partiach wielu sekwencji, można tworzyć tańce o dowolnej długości.
- Tańce, które obejmują ograniczenia stawów, takie jak ruch dolnej części ciała powodujący generowanie górnej części ciała lub odwrotnie.
- Tańce z początkowymi i końcowymi ruchami, które są z góry określone.
- Tańce rozpoczynające się z góry określonym ruchem nazywane są kontynuacjami tańca.
Naukowcy odkryli, że obserwatorzy ludzcy zdecydowanie preferowali tańce generowane przez algorytm EDGE od tańców generowanych przez inne algorytmy. Autorzy badania twierdzą, że algorytm EDGE stanowi znaczący postęp w dziedzinie tańca generowanego komputerowo. Uważają, że algorytm można wykorzystać do tworzenia tańców w prawdziwym świecie i wirtualne wydarzenia, takie jak trendy społecznościowe i TikTok, wesela, imprezy lub imprezy firmowe.
Przeczytaj więcej o sztucznej inteligencji:
Odpowiedzialność
Zgodnie z Zaufaj wytycznym projektu, należy pamiętać, że informacje zawarte na tej stronie nie mają na celu i nie powinny być interpretowane jako porady prawne, podatkowe, inwestycyjne, finansowe lub jakiekolwiek inne formy porad. Ważne jest, aby inwestować tylko tyle, na utratę czego możesz sobie pozwolić, a w przypadku jakichkolwiek wątpliwości zasięgnąć niezależnej porady finansowej. Aby uzyskać więcej informacji, sugerujemy zapoznać się z warunkami oraz stronami pomocy i wsparcia udostępnianymi przez wydawcę lub reklamodawcę. MetaversePost zobowiązuje się do sporządzania dokładnych i bezstronnych raportów, jednakże warunki rynkowe mogą ulec zmianie bez powiadomienia.
O autorze
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
Więcej artykułów
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
