Music-to-Dance: EDGE AI генерирует бесконечное количество танцевальных идей для TikTok на основе аудиовхода.
Коротко
EDGE: программное обеспечение для хореографии, созданное искусственным интеллектом, которое меняет танцевальный мир
Стэнфордский университет объявило мощный искусственный интеллект для танцевальной музыки, который генерирует танец из аудиовхода под названием EDGE. EDGE — это мощный метод создания настраиваемых танцев, который может создавать физически правдоподобные, реалистичные танцы, придерживаясь любой предоставленной музыки. С помощью Jukebox, мощного экстрактора музыкальных особенностей и модели распространения на основе преобразования, EDGE предлагает мощные возможности редактирования, которые идеально подходят для танца, такие как совместное обусловливание, промежуточное движение и продолжение танца. Выяснилось, что оценщики-люди больше предпочитают танцы, созданные EDGE, по сравнению с недавними подходами, такими как Bailando и ФАКТ.
От музыки к хореографии: как EDGE создает свои танцы
Даже для музыкальных образцов, найденных в дикой природе, EDGE может воспроизводить высококачественные танцы, используя музыкальные вложения из надежной модели Jukebox. Модель замороженного музыкального автомата используется EDGE для включения входной музыки. Серия пятисекундных танцевальных клипов используется для обучения условному слову. диффузионная модель как сопоставить музыку, встроенную в клипы. Перед объединением пакетов из нескольких клипов для создания полного видео произвольной длины применяются временные ограничения для обеспечения временной согласованности.
Только что сгенерированные выходы музыки к танцу
Произвольные временные и пространственные ограничения поддерживаются EDGE. Это может поддерживать множество приложений для конечных пользователей, в том числе:
- Требуя временной непрерывности между партиями многочисленных последовательностей, можно создавать танцы произвольной длины.
- Танцы, которые включают ограничения суставов, такие как движение нижней части тела, вызывающее генерацию верхней части тела, или наоборот.
- Танцы с заранее определенными начальными и конечными движениями.
- Танцы, которые начинаются с заранее определенного движения, известны как продолжения танца.
Исследователи обнаружили, что люди-наблюдатели в подавляющем большинстве предпочитали танцы, сгенерированные алгоритмом EDGE, танцам, сгенерированным другими алгоритмами. Авторы исследования говорят, что алгоритм EDGE представляет собой большой шаг вперед в области компьютерного танца. Они считают, что алгоритм можно использовать для создания танцев для реального мира и виртуальные события, такие как тренды в социальных сетях и TikTok, свадьбы, вечеринки или корпоративные мероприятия.
Подробнее об ИИ:
Отказ от ответственности
В соответствии с Руководство трастового проектаОбратите внимание, что информация, представленная на этой странице, не предназначена и не должна интерпретироваться как юридическая, налоговая, инвестиционная, финансовая или любая другая форма консультации. Важно инвестировать только то, что вы можете позволить себе потерять, и обращаться за независимой финансовой консультацией, если у вас есть какие-либо сомнения. Для получения дополнительной информации мы предлагаем обратиться к положениям и условиям, а также к страницам справки и поддержки, предоставленным эмитентом или рекламодателем. MetaversePost стремится предоставлять точную и объективную отчетность, однако рыночные условия могут быть изменены без предварительного уведомления.
Об авторе
Дамир — руководитель группы, менеджер по продукту и редактор в Metaverse Post, охватывающие такие темы, как AI/ML, AGI, LLM, Metaverse и Web3-связанные поля. Его статьи ежемесячно привлекают огромную аудиторию, насчитывающую более миллиона пользователей. Похоже, он эксперт с 10-летним опытом работы в области SEO и цифрового маркетинга. Дамир упоминается в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto и другие издания. Он путешествует между ОАЭ, Турцией, Россией и СНГ в качестве цифрового кочевника. Дамир получил степень бакалавра в области физики, что, по его мнению, дало ему навыки критического мышления, необходимые для достижения успеха в постоянно меняющемся мире Интернета.
Другие статьи
Дамир — руководитель группы, менеджер по продукту и редактор в Metaverse Post, охватывающие такие темы, как AI/ML, AGI, LLM, Metaverse и Web3-связанные поля. Его статьи ежемесячно привлекают огромную аудиторию, насчитывающую более миллиона пользователей. Похоже, он эксперт с 10-летним опытом работы в области SEO и цифрового маркетинга. Дамир упоминается в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto и другие издания. Он путешествует между ОАЭ, Турцией, Россией и СНГ в качестве цифрового кочевника. Дамир получил степень бакалавра в области физики, что, по его мнению, дало ему навыки критического мышления, необходимые для достижения успеха в постоянно меняющемся мире Интернета.
