Звіт про новини Технологія
Листопад 23, 2022

Music-to-Dance: EDGE AI генерує нескінченну кількість танцювальних ідей для TikTok на основі аудіовходу

Коротко

EDGE: Хореографічне програмне забезпечення, створене ШІ, яке змінює світ танцю

Стенфордський університет має оголошений потужний штучний інтелект від музики до танцю, який генерує танець із аудіовходу під назвою EDGE. EDGE — це потужний метод створення танцю, який можна налаштувати, який може створити фізично правдоподібні, реалістичні танці, дотримуючись будь-якої наданої музики. Завдяки Jukebox, потужному інструменту для виділення музичних функцій, і моделі дифузії на основі трансформатора, EDGE пропонує потужні можливості редагування, які ідеально підходять для танцю, як-от кондиціонування в суглобах, проміжний рух і продовження танцю. Було виявлено, що оцінювачі надають перевагу танцям, створеним EDGE, порівняно з останніми підходами, такими як Bailando і ФАКТ.

Music-to-Dance: EDGE AI генерує нескінченну кількість танцювальних ідей для TikTok на основі аудіовходу

Від музики до хореографії: як EDGE створює свої танці

Навіть для музичних зразків, знайдених у дикій природі, EDGE може створювати високоякісні танці, використовуючи музичні вставки з надійної моделі Jukebox. Заморожена модель Jukebox використовується EDGE для включення вхідної музики. Серія п’ятисекундних танцювальних кліпів використовується для навчання умовного способу дифузійна модель як відобразити музику, вбудовану в кліпи. Перед об’єднанням груп із кількох кліпів для створення повного відео довільної довжини застосовуються тимчасові обмеження, щоб забезпечити часову узгодженість.

Від музики до хореографії: як EDGE створює свої танці
EDGE навчається на 5-секундних танцювальних кліпах, але, накладаючи часові обмеження на групи послідовностей, він здатний створювати танці будь-якої тривалості. На ілюстрації EDGE змушує першу половину кожної послідовності збігатися з другою половиною попередньої.

Щойно створені музичні та танцювальні виходи

EDGE підтримує довільні часові та просторові обмеження. Є багато програм для кінцевих користувачів, які можуть підтримуватися цим, зокрема:

  • Вимагаючи безперервності в часі між партіями численних послідовностей, можна створювати танці довільної довжини.
  • Танці, які включають обмеження суглобів, як-от рухи нижньої частини тіла, що спричиняє формування верхньої частини тіла, або навпаки.
  • Танці з заздалегідь визначеними початковими та кінцевими рухами.
  • Танці, які починаються із заздалегідь визначеного руху, називаються продовженням танцю.
У танці переважає складний, навмисний, ковзний контакт стопи з землею. Нова втрата консистенції контакту, яка значно покращує фізичний реалізм, зберігаючи ковзання, дозволяє EDGE визначати, коли ноги мають ковзати, а коли ні.

Дослідники виявили, що люди-спостерігачі переважно віддають перевагу танцям, згенерованим алгоритмом EDGE, а не танцям, створеним іншими алгоритмами. Автори дослідження кажуть, що алгоритм EDGE є серйозним прогресом у сфері комп’ютерного танцю. Вони вважають, що алгоритм можна використовувати для створення танців у реальному світі віртуальні події, як-от соціальні тенденції та тенденції TikTok, весілля, вечірки чи корпоративні заходи.

Докладніше про ШІ:

відмова

Відповідно до Правила проекту Trust, будь ласка, зверніть увагу, що інформація, надана на цій сторінці, не призначена і не повинна тлумачитися як юридична, податкова, інвестиційна, фінансова або будь-яка інша форма консультації. Важливо інвестувати лише те, що ви можете дозволити собі втратити, і звернутися за незалежною фінансовою порадою, якщо у вас виникнуть сумніви. Щоб отримати додаткову інформацію, ми пропонуємо звернутися до положень та умов, а також до сторінок довідки та підтримки, наданих емітентом або рекламодавцем. MetaversePost прагне до точного, неупередженого звітування, але ринкові умови можуть змінюватися без попередження.

про автора

Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється. 

інші статті
Дамір Ялалов
Дамір Ялалов

Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється. 

Hot Stories
Приєднуйтеся до нашої розсилки.
Останні новини

Від Ripple до The Big Green DAO: як криптовалютні проекти сприяють благодійності

Давайте розглянемо ініціативи, які використовують потенціал цифрових валют для благодійних цілей.

Дізнайтеся більше

AlphaFold 3, Med-Gemini та інші: як AI трансформує охорону здоров’я у 2024 році

ШІ проявляється різними способами в охороні здоров’я, від виявлення нових генетичних кореляцій до розширення можливостей роботизованих хірургічних систем...

Дізнайтеся більше
Приєднуйтесь до нашої спільноти інноваційних технологій
Детальніше
Читати далі
Galxe представляє L1 Blockchain «Gravity» для Omnichain досвіду та повної абстракції
Звіт про новини Технологія
Galxe представляє L1 Blockchain «Gravity» для Omnichain досвіду та повної абстракції
Травень 29, 2024
Альянс штучного суперінтелекту планує завершити злиття 13 червня
Business ринки Звіт про новини Технологія
Альянс штучного суперінтелекту планує завершити злиття 13 червня
Травень 29, 2024
Найпопулярніші децентралізовані фінанси (DeFi) Проекти на Ethereum: 5 найкращих у 2024 році
Digest Топ списки Business ринки Софтвер Технологія
Найпопулярніші децентралізовані фінанси (DeFi) Проекти на Ethereum: 5 найкращих у 2024 році
Травень 29, 2024
Мережа Aptos досягла історичного максимуму: транзакції користувачів зросли до 32,000 XNUMX TPS на фоні рекордного обсягу операцій
Думка Business ринки Софтвер Технологія
Мережа Aptos досягла історичного максимуму: транзакції користувачів зросли до 32,000 XNUMX TPS на фоні рекордного обсягу операцій
Травень 29, 2024
CRYPTOMERIA LABS PTE. LTD.