Music-to-Dance: EDGE AI генерує нескінченну кількість танцювальних ідей для TikTok на основі аудіовходу
Коротко
EDGE: Хореографічне програмне забезпечення, створене ШІ, яке змінює світ танцю
Стенфордський університет має оголошений потужний штучний інтелект від музики до танцю, який генерує танець із аудіовходу під назвою EDGE. EDGE — це потужний метод створення танцю, який можна налаштувати, який може створити фізично правдоподібні, реалістичні танці, дотримуючись будь-якої наданої музики. Завдяки Jukebox, потужному інструменту для виділення музичних функцій, і моделі дифузії на основі трансформатора, EDGE пропонує потужні можливості редагування, які ідеально підходять для танцю, як-от кондиціонування в суглобах, проміжний рух і продовження танцю. Було виявлено, що оцінювачі надають перевагу танцям, створеним EDGE, порівняно з останніми підходами, такими як Bailando і ФАКТ.
Від музики до хореографії: як EDGE створює свої танці
Навіть для музичних зразків, знайдених у дикій природі, EDGE може створювати високоякісні танці, використовуючи музичні вставки з надійної моделі Jukebox. Заморожена модель Jukebox використовується EDGE для включення вхідної музики. Серія п’ятисекундних танцювальних кліпів використовується для навчання умовного способу дифузійна модель як відобразити музику, вбудовану в кліпи. Перед об’єднанням груп із кількох кліпів для створення повного відео довільної довжини застосовуються тимчасові обмеження, щоб забезпечити часову узгодженість.
Щойно створені музичні та танцювальні виходи
EDGE підтримує довільні часові та просторові обмеження. Є багато програм для кінцевих користувачів, які можуть підтримуватися цим, зокрема:
- Вимагаючи безперервності в часі між партіями численних послідовностей, можна створювати танці довільної довжини.
- Танці, які включають обмеження суглобів, як-от рухи нижньої частини тіла, що спричиняє формування верхньої частини тіла, або навпаки.
- Танці з заздалегідь визначеними початковими та кінцевими рухами.
- Танці, які починаються із заздалегідь визначеного руху, називаються продовженням танцю.
Дослідники виявили, що люди-спостерігачі переважно віддають перевагу танцям, згенерованим алгоритмом EDGE, а не танцям, створеним іншими алгоритмами. Автори дослідження кажуть, що алгоритм EDGE є серйозним прогресом у сфері комп’ютерного танцю. Вони вважають, що алгоритм можна використовувати для створення танців у реальному світі віртуальні події, як-от соціальні тенденції та тенденції TikTok, весілля, вечірки чи корпоративні заходи.
Докладніше про ШІ:
відмова
Відповідно до Правила проекту Trust, будь ласка, зверніть увагу, що інформація, надана на цій сторінці, не призначена і не повинна тлумачитися як юридична, податкова, інвестиційна, фінансова або будь-яка інша форма консультації. Важливо інвестувати лише те, що ви можете дозволити собі втратити, і звернутися за незалежною фінансовою порадою, якщо у вас виникнуть сумніви. Щоб отримати додаткову інформацію, ми пропонуємо звернутися до положень та умов, а також до сторінок довідки та підтримки, наданих емітентом або рекламодавцем. MetaversePost прагне до точного, неупередженого звітування, але ринкові умови можуть змінюватися без попередження.
про автора
Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється.
інші статті
Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється.
