Music-to-Dance:EDGE AI 根据音频输入为 TikTok 生成无限数量的舞蹈创意
简单来说
EDGE:改变舞蹈世界的人工智能编舞软件
斯坦福大学有 公布 一种强大的音乐舞蹈 AI,可根据称为 EDGE 的音频输入生成舞蹈。 EDGE 是一种用于定制舞蹈创作的有效方法,可以在遵循任何提供的音乐的同时制作出物理上可信、逼真的舞蹈。 借助强大的音乐特征提取器 Jukebox 和基于变换器的扩散模型,EDGE 提供了非常适合舞蹈的强大编辑功能,例如关节调节、中间动作和舞蹈延续。 它发现,与最近的方法(如 Bailando 和事实。
从音乐到编舞:EDGE 如何产生它的舞蹈
即使对于在野外发现的音乐样本,EDGE 也可以使用来自强大的 Jukebox 模型的音乐嵌入来制作高质量的舞蹈。 EDGE 使用冻结的点唱机模型来合并输入音乐。 一系列五秒钟的舞蹈剪辑用于教授有条件的 扩散模型 如何映射嵌入到剪辑中的音乐。 在将多个剪辑的批次连接在一起以创建任意长度的完整视频之前,应用时间约束以确保时间一致性。
新生成的音乐到舞蹈输出
EDGE 支持任意时间和空间限制。 它可以支持许多最终用户应用程序,包括:
- 通过要求多个序列批次之间的时间连续性,可以生成任意长度的舞蹈。
- 包含关节限制的舞蹈,例如下半身运动导致上半身生成,或相反。
- 以预先确定的开始和结束动作跳舞。
- 以预定动作开始的舞蹈被称为舞蹈延续。
研究人员发现,与其他算法生成的舞蹈相比,人类观察者绝大多数更喜欢 EDGE 算法生成的舞蹈。 该研究的作者表示,EDGE 算法代表了计算机生成舞蹈领域的重大进步。 他们相信该算法可用于为现实世界和 虚拟事件,例如社交和 TikTok 趋势、婚礼、派对或公司活动。
阅读有关人工智能的更多信息:
免责声明
在与行 信托项目指南,请注意,本页提供的信息无意且不应被解释为法律、税务、投资、财务或任何其他形式的建议。 重要的是,仅投资您可以承受损失的金额,并在有任何疑问时寻求独立的财务建议。 如需了解更多信息,我们建议您参阅条款和条件以及发行人或广告商提供的帮助和支持页面。 MetaversePost 致力于提供准确、公正的报告,但市场状况如有变更,恕不另行通知。
关于作者
Damir 是团队领导、产品经理和编辑 Metaverse Post,涵盖 AI/ML、AGI、LLM、Metaverse 等主题 Web3- 相关领域。 他的文章每月吸引超过一百万用户的大量读者。 他似乎是一位在 SEO 和数字营销方面拥有 10 年经验的专家。 达米尔曾在 Mashable、Wired、 Cointelegraph、《纽约客》、Inside.com、Entrepreneur、BeInCrypto 和其他出版物。 他作为数字游牧者往返于阿联酋、土耳其、俄罗斯和独联体国家之间。 达米尔获得了物理学学士学位,他认为这赋予了他在不断变化的互联网格局中取得成功所需的批判性思维技能。
更多文章Damir 是团队领导、产品经理和编辑 Metaverse Post,涵盖 AI/ML、AGI、LLM、Metaverse 等主题 Web3- 相关领域。 他的文章每月吸引超过一百万用户的大量读者。 他似乎是一位在 SEO 和数字营销方面拥有 10 年经验的专家。 达米尔曾在 Mashable、Wired、 Cointelegraph、《纽约客》、Inside.com、Entrepreneur、BeInCrypto 和其他出版物。 他作为数字游牧者往返于阿联酋、土耳其、俄罗斯和独联体国家之间。 达米尔获得了物理学学士学位,他认为这赋予了他在不断变化的互联网格局中取得成功所需的批判性思维技能。