Music-to-Dance: EDGE AI는 오디오 입력을 기반으로 TikTok을 위한 무한한 수의 댄스 아이디어를 생성합니다.
요컨대
EDGE: 댄스 세계를 변화시키는 AI 생성 안무 소프트웨어
스탠포드 대학은 발표 EDGE라는 오디오 입력에서 댄스를 생성하는 강력한 뮤직 투 댄스 AI입니다. EDGE는 제공된 음악을 고수하면서 물리적으로 믿을 수 있고 사실적인 댄스를 생성할 수 있는 맞춤형 댄스 제작을 위한 강력한 방법입니다. 강력한 음악 특징 추출기인 Jukebox와 변환기 기반 확산 모델의 도움으로 EDGE는 조인트 와이즈 컨디셔닝, 중간 동작 및 댄스 지속과 같은 댄스에 이상적인 강력한 편집 기능을 제공합니다. 다음과 같은 최근 접근 방식과 비교할 때 인간 평가자가 EDGE에서 생성된 댄스를 크게 선호한다는 사실을 발견했습니다. Bailando 사실.
음악에서 안무까지: EDGE가 춤을 만드는 방법
야생에서 발견되는 음악 샘플의 경우에도 EDGE는 강력한 Jukebox 모델의 음악 임베딩을 사용하여 고품질 댄스를 생성할 수 있습니다. 정지된 Jukebox 모델은 EDGE에서 입력 음악을 통합하는 데 사용됩니다. 일련의 XNUMX초 댄스 클립은 조건부 학습을 가르치는 데 사용됩니다. 확산 모델 클립에 포함된 음악을 매핑하는 방법. 임의 길이의 전체 비디오를 만들기 위해 여러 클립의 배치를 함께 결합하기 전에 시간적 일관성을 보장하기 위해 시간적 제약이 적용됩니다.
새롭게 생성된 음악-춤 출력
EDGE는 임의의 시간적 및 공간적 제한을 지원합니다. 다음을 포함하여 이를 통해 지원할 수 있는 수많은 최종 사용자 애플리케이션이 있습니다.
- 수많은 시퀀스 배치에 걸쳐 시간적 연속성을 요구함으로써 임의 길이의 댄스를 생성할 수 있습니다.
- 상체 생성을 유발하는 하체 움직임 또는 그 반대와 같이 관절 제한을 포함하는 댄스.
- 미리 정해진 시작과 끝 동작으로 춤을 춥니다.
- 미리 결정된 동작으로 시작하는 춤을 댄스 컨티뉴에이션이라고 합니다.
연구원들은 인간 관찰자들이 다른 알고리즘에 의해 생성된 춤보다 EDGE 알고리즘에 의해 생성된 춤을 압도적으로 선호한다는 것을 발견했습니다. 이 연구의 저자는 EDGE 알고리즘이 컴퓨터 생성 댄스 분야의 주요 발전을 나타낸다고 말합니다. 그들은 알고리즘이 실제 세계와 춤을 만드는 데 사용될 수 있다고 믿습니다. 가상 이벤트, 소셜 및 TikTok 트렌드, 결혼식, 파티 또는 기업 행사와 같은
AI에 대해 자세히 알아보기:
책임 부인
줄 안 트러스트 프로젝트 지침, 이 페이지에 제공된 정보는 법률, 세금, 투자, 재정 또는 기타 형태의 조언을 제공하기 위한 것이 아니며 해석되어서도 안 됩니다. 손실을 감수할 수 있는 만큼만 투자하고 의심스러운 경우 독립적인 재정 조언을 구하는 것이 중요합니다. 자세한 내용은 이용약관은 물론 발행자나 광고주가 제공하는 도움말 및 지원 페이지를 참조하시기 바랍니다. MetaversePost 는 정확하고 편견 없는 보고를 위해 최선을 다하고 있지만 시장 상황은 예고 없이 변경될 수 있습니다.
저자에 관하여
Damir는 팀 리더, 제품 관리자 및 편집자입니다. Metaverse Post, AI/ML, AGI, LLM, Metaverse 및 Web3-관련 분야. 그의 기사는 매달 백만 명이 넘는 사용자의 엄청난 청중을 끌어들입니다. 그는 SEO 및 디지털 마케팅 분야에서 10년의 경험을 가진 전문가로 보입니다. Damir는 Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto 및 기타 간행물. UAE, 터키, 러시아, CIS를 오가며 디지털 유목민으로 활동하고 있습니다. Damir는 끊임없이 변화하는 인터넷 환경에서 성공하는 데 필요한 비판적 사고 기술을 제공했다고 믿는 물리학 학사 학위를 받았습니다.
더 많은 기사
Damir는 팀 리더, 제품 관리자 및 편집자입니다. Metaverse Post, AI/ML, AGI, LLM, Metaverse 및 Web3-관련 분야. 그의 기사는 매달 백만 명이 넘는 사용자의 엄청난 청중을 끌어들입니다. 그는 SEO 및 디지털 마케팅 분야에서 10년의 경험을 가진 전문가로 보입니다. Damir는 Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto 및 기타 간행물. UAE, 터키, 러시아, CIS를 오가며 디지털 유목민으로 활동하고 있습니다. Damir는 끊임없이 변화하는 인터넷 환경에서 성공하는 데 필요한 비판적 사고 기술을 제공했다고 믿는 물리학 학사 학위를 받았습니다.
