Music-to-Dance: EDGE AI は、音声入力に基づいて TikTok 用の無数のダンスのアイデアを生成します
簡単に言えば
EDGE: ダンスの世界を変える AI 生成振付ソフトウェア
スタンフォード大学は、 発表の EDGE と呼ばれる音声入力からダンスを生成する強力な音楽からダンスへの AI。 EDGE は、カスタマイズ可能なダンス作成のための強力な方法であり、提供された音楽に準拠しながら、物理的に信じられないほどリアルなダンスを作成できます。 強力な音楽特徴抽出ツールである Jukebox とトランスフォーマー ベースの拡散モデルの助けを借りて、EDGE は、ジョイントごとのコンディショニング、モーション インビトウィーン、ダンスの継続など、ダンスに最適な強力な編集機能を提供します。 人間の評価者は、次のような最近のアプローチと比較して、EDGE によって生成されたダンスを非常に好むことがわかりました。 ダンス そして事実。
音楽から振り付けまで: EDGE がどのようにダンスを生成するか
野生で見つかった音楽サンプルであっても、EDGE は堅牢なジュークボックス モデルからの音楽埋め込みを使用して高品質のダンスを生成できます。 EDGE では、入力音楽を組み込むためにフリーズされたジュークボックス モデルが使用されます。 一連の XNUMX 秒のダンス クリップは、条件付きのダンス クリップを教えるために使用されます。 拡散モデル クリップに埋め込まれた音楽をマッピングする方法。 複数のクリップのバッチを結合して任意の長さのフルビデオを作成する前に、時間的一貫性を確保するために時間的制約が適用されます。
新しく生成された音楽からダンスへの出力
EDGE では、任意の時間的および空間的な制限がサポートされています。 これによってサポートできるエンドユーザー アプリケーションは多数あります。
- 多数のシーケンスのバッチ間で時間的な連続性を要求することにより、任意の長さのダンスを生成できます。
- 下半身の動きが上半身の生成を引き起こす、またはその逆など、関節の制限を含むダンス。
- 決まった動きの始まりと終わりで踊ります。
- あらかじめ決められたモーションで始まるダンスは、ダンスの継続として知られています。
研究者は、人間の観察者が、他のアルゴリズムによって生成されたダンスよりも、EDGE アルゴリズムによって生成されたダンスを圧倒的に好むことを発見しました。 この研究の著者は、EDGE アルゴリズムは、コンピューターで生成されたダンスの分野における大きな進歩を表していると述べています。 彼らは、このアルゴリズムを使用して、現実世界のダンスを作成し、 仮想イベント、ソーシャルおよび TikTok のトレンド、結婚式、パーティー、企業行事など。
AI について詳しく読む:
免責事項
に沿って トラストプロジェクトのガイドライン, このページで提供される情報は、法律、税金、投資、財務、またはその他の形式のアドバイスを目的としたものではなく、そのように解釈されるべきではないことに注意してください。 損失しても許容できる金額のみを投資し、疑問がある場合は独立した財務上のアドバイスを求めることが重要です。 詳細については、利用規約のほか、発行者または広告主が提供するヘルプおよびサポート ページを参照することをお勧めします。 MetaversePost は正確で公平なレポートに努めていますが、市場の状況は予告なく変更される場合があります。
著者について
Damir は、チームリーダー、プロダクトマネージャー、編集者です。 Metaverse PostAI/ML、AGI、LLM、メタバース、 Web3に関連するフィールド。 彼の記事は、毎月 10 万人を超えるユーザーという膨大な読者を魅了しています。 彼はSEOとデジタルマーケティングでXNUMX年の経験を持つ専門家のようです。 ダミールはMashable、Wired、 Cointelegraph、The New Yorker、Inside.com、Entrepreneur、BeInCrypto、およびその他の出版物。 彼はデジタル遊牧民として UAE、トルコ、ロシア、CIS の間を旅しています。 ダミールは物理学の学士号を取得しており、これにより、インターネットの絶え間なく変化する状況で成功するために必要な批判的思考スキルが身についたと信じています。
より多くの記事
Damir は、チームリーダー、プロダクトマネージャー、編集者です。 Metaverse PostAI/ML、AGI、LLM、メタバース、 Web3に関連するフィールド。 彼の記事は、毎月 10 万人を超えるユーザーという膨大な読者を魅了しています。 彼はSEOとデジタルマーケティングでXNUMX年の経験を持つ専門家のようです。 ダミールはMashable、Wired、 Cointelegraph、The New Yorker、Inside.com、Entrepreneur、BeInCrypto、およびその他の出版物。 彼はデジタル遊牧民として UAE、トルコ、ロシア、CIS の間を旅しています。 ダミールは物理学の学士号を取得しており、これにより、インターネットの絶え間なく変化する状況で成功するために必要な批判的思考スキルが身についたと信じています。
