Music-to-Dance: EDGE AI generiert auf Basis von Audioeingaben unendlich viele Tanzideen für TikTok
In Kürze
EDGE: Die KI-generierte Choreographie-Software, die die Tanzwelt verändert
Die Stanford University hat angekündigt eine leistungsstarke Music-to-Dance-KI, die Tanz aus Audioeingaben namens EDGE generiert. EDGE ist eine leistungsstarke Methode zur anpassbaren Tanzkreation, die physisch glaubwürdige, realistische Tänze hervorbringen kann, während sie sich an jede bereitgestellte Musik hält. Mit Hilfe von Jukebox, einem leistungsstarken Musikfunktions-Extraktor, und einem transformatorbasierten Diffusionsmodell bietet EDGE leistungsstarke Bearbeitungsfunktionen, die ideal für den Tanz sind, wie z. B. gelenkweise Konditionierung, Bewegung dazwischen und Tanzfortsetzung. Es stellt fest, dass menschliche Bewerter von EDGE generierte Tänze im Vergleich zu neueren Ansätzen wie z Tanzen und FAKT.
Von der Musik zur Choreografie: Wie EDGE seine Tänze generiert
Selbst für in der Wildnis gefundene Musikbeispiele kann EDGE mithilfe von Musikeinbettungen aus dem robusten Jukebox-Modell qualitativ hochwertige Tänze produzieren. Ein eingefrorenes Jukebox-Modell wird von EDGE verwendet, um Eingangsmusik zu integrieren. Eine Reihe von fünf Sekunden langen Tanzclips wird verwendet, um eine Bedingung zu lehren Diffusionsmodell wie man die in die Clips eingebettete Musik zuordnet. Bevor Stapel mehrerer Clips zusammengefügt werden, um ein vollständiges Video beliebiger Länge zu erstellen, werden zeitliche Beschränkungen angewendet, um zeitliche Konsistenz sicherzustellen.
Frisch generierte Music-to-Dance-Ausgaben
Beliebige zeitliche und räumliche Begrenzungen werden von EDGE unterstützt. Es gibt zahlreiche Endbenutzeranwendungen, die dadurch unterstützt werden können, darunter:
- Indem eine zeitliche Kontinuität über Chargen zahlreicher Sequenzen hinweg erforderlich ist, können Tänze beliebiger Länge erzeugt werden.
- Tänze, die Gelenkbeschränkungen beinhalten, wie z. B. Bewegungen des Unterkörpers, die eine Generierung des Oberkörpers verursachen, oder das Gegenteil.
- Tänze mit vorher festgelegten Anfangs- und Endbewegungen.
- Tänze, die mit einer vorgegebenen Bewegung beginnen, werden als Tanzfortsetzungen bezeichnet.
Forscher fanden heraus, dass menschliche Beobachter Tänze, die vom EDGE-Algorithmus generiert wurden, mit überwältigender Mehrheit den von anderen Algorithmen generierten Tänzen vorzogen. Die Autoren der Studie sagen, dass der EDGE-Algorithmus einen großen Fortschritt im Bereich des computergenerierten Tanzes darstellt. Sie glauben, dass der Algorithmus verwendet werden könnte, um Tänze für die reale Welt zu kreieren und virtuelle Ereignisse, wie Social- und TikTok-Trends, Hochzeiten, Partys oder Firmenveranstaltungen.
Lesen Sie mehr über KI:
Haftungsausschluss
Im Einklang mit der Richtlinien des Trust-ProjektsBitte beachten Sie, dass die auf dieser Seite bereitgestellten Informationen nicht als Rechts-, Steuer-, Anlage-, Finanz- oder sonstige Beratung gedacht sind und nicht als solche interpretiert werden sollten. Es ist wichtig, nur so viel zu investieren, wie Sie sich leisten können, zu verlieren, und im Zweifelsfall eine unabhängige Finanzberatung einzuholen. Für weitere Informationen empfehlen wir einen Blick auf die Allgemeinen Geschäftsbedingungen sowie die Hilfe- und Supportseiten des Herausgebers oder Werbetreibenden. MetaversePost ist einer genauen, unvoreingenommenen Berichterstattung verpflichtet, die Marktbedingungen können sich jedoch ohne Vorankündigung ändern.
Über den Autor
Damir ist Teamleiter, Produktmanager und Redakteur bei Metaverse Post, behandelt Themen wie KI/ML, AGI, LLMs, Metaverse und Web3-bezogene Felder. Seine Artikel ziehen jeden Monat ein riesiges Publikum von über einer Million Nutzern an. Er scheint ein Experte mit 10 Jahren Erfahrung in SEO und digitalem Marketing zu sein. Damir wurde in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto und andere Publikationen. Als digitaler Nomade reist er zwischen den Vereinigten Arabischen Emiraten, der Türkei, Russland und der GUS. Damir hat einen Bachelor-Abschluss in Physik, der ihm seiner Meinung nach die Fähigkeiten zum kritischen Denken vermittelt hat, die er braucht, um in der sich ständig verändernden Landschaft des Internets erfolgreich zu sein.
Weitere Artikel
Damir ist Teamleiter, Produktmanager und Redakteur bei Metaverse Post, behandelt Themen wie KI/ML, AGI, LLMs, Metaverse und Web3-bezogene Felder. Seine Artikel ziehen jeden Monat ein riesiges Publikum von über einer Million Nutzern an. Er scheint ein Experte mit 10 Jahren Erfahrung in SEO und digitalem Marketing zu sein. Damir wurde in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto und andere Publikationen. Als digitaler Nomade reist er zwischen den Vereinigten Arabischen Emiraten, der Türkei, Russland und der GUS. Damir hat einen Bachelor-Abschluss in Physik, der ihm seiner Meinung nach die Fähigkeiten zum kritischen Denken vermittelt hat, die er braucht, um in der sich ständig verändernden Landschaft des Internets erfolgreich zu sein.
