2022 년 10 월 21 일

Google AI, 최초의 텍스트-음악 생성기 AudioLM 발표

게시됨: 21년 2022월 12일 오후 09시 21분 업데이트됨: 2022년 12월 10일 오후 XNUMX시 XNUMX분

요컨대

AudioLM은 소리를 듣는 것만으로도 음악을 생성할 수 있습니다.

인간의 말과 피아노 음악을 이어가는 Mubert AI

와 GPT-3 그리고 다른 사람들은 생성 AI에 대한 아이디어가 앞으로 나아갈 가능성이 높습니다. 우리는 또한 인페인팅(inpainting)과 아웃페인팅(outpainting)의 개념도 발견했습니다. AI는 테마와 스타일을 유지하면서 능숙하게 이미지를 완성합니다. 음악은 어떻습니까?

그리고 또! 이 모든 것이 의미를 유지하는 AI 언어 모델을 기반으로 하기 때문에 이 기술이 음악에 적용되는 것은 시간 문제였습니다. 이제 때가 왔습니다.

최근 Google 연구에 따르면 AudioLM이라는 오디오 제작을 위한 새로운 프레임워크를 학습하여 단순히 소리를 들으면서 사실적인 말과 피아노 음악을 만들 수 있다고 합니다. 장기적인 일관성과 뛰어난 충실도로 인해 AudioLM은 이전 시스템을 능가하고 음성 합성 및 컴퓨터 지원 음악의 응용 프로그램으로 오디오 생성을 향상시킵니다.

우리는 이전 모델 생성을 뒷받침했던 것과 동일한 AI 개념을 사용하여 AudioLM에서 생성된 합성 사운드를 인식하는 시스템을 개발했습니다.

오디오LM Google AI에서 "의도"를 유지하면서 음향 통로를 확장할 수 있습니다. 현재로서는 제한된 입력 데이터 샘플을 기반으로 사람의 말과 피아노 음악을 계속하도록 훈련되었습니다. 아래 샘플을 확인하세요.

음성에 대한 기준은 간단했습니다. 청취자들은 계속되는 음성이 사람의 음성처럼 들리는지 평가하도록 요청받았습니다. 음악과 함께 입력용으로 제공되는 섹션의 "계속"이 다음과 같이 처음부터 현재의 모든 음악 생성기보다 품질이 훨씬 우수하다는 것이 발견되었습니다. 주크 박스. 입력에 대한 제안으로 AI는 음악을 훨씬 더 잘 이어갑니다.

인간 평가자는 결과를 확인하기 위해 오디오 샘플을 들었습니다. 그들은 녹음된 사람의 목소리가 실제로 계속해서 들리는지 또는 AudioLM에서 생성된 인공 음성이 들리는지 확인했습니다. 그들의 데이터는 51.2%의 성공률을 나타냅니다. 결과적으로 일반 청취자는 AudioLM에서 생성된 음성과 실제 사람의 음성을 구별하기 어려울 것입니다.

텍스트를 음악으로 변환하는 기술이 음악 비즈니스를 변화시키나요?

를 기반으로 한 텍스트-음악 생성기 뮤버트 API 최근 또 다른 AI 모델인 Mubert가 발표했습니다. Mubert는 귀하가 보내는 각 요청에 대해 서로 다른 사운드 세트를 생성합니다. 재발 가능성은 정말 희박합니다. 요청이 있을 때 음악이 생성됩니다. 완성된 곡의 데이터베이스에서 가져오지 않습니다. 얼마나 진실로 이 음악을 생성 일반적인 질문입니다.

사운드는 생성되기 전에 선택됩니다. 입력 프롬프트와 Mubert API 태그는 모두 변환기 신경망의 잠재 공간 벡터로 인코딩됩니다. 그런 다음 각 쿼리에 가장 가까운 태그 벡터가 선택되고 수반되는 태그가 API로 전송되어 음악을 생성합니다. 사운드를 구성하는 데 신경망이 사용되지 않았습니다(베이스, 리드 등을 위한 별도의 루프). 모든 사운드는 뮤지션과 사운드 디자이너가 제작했습니다.

Mubert의 다음 중요한 단계는 사진, 영화, 시나리오 및 프레젠테이션과 같은 현재 세계에서 항목을 가져와 주변 세계의 음악을 만드는 것입니다.

뮤지컬 뮤버트 AI의 입에 무작정 텍스트 프롬프트를 넣어 얻을 수 있는 것은 다음과 같다.

이것은 보다 정교하고 정확한 생성 알고리즘을 구축하는 과정의 초기 단계이지만 시간과 비용이 소요됩니다.

그러나 텍스트를 음악으로 변환하는 기술은 이미 사용 가능하므로 "임의 프롬프트 스크립트 작성"을 "입력 프롬프트"로 전환하여 대량으로 앨범을 생성할 수 있습니다. 아티스트는 더 이상 필요하지 않은 것 같습니다.

더 많은 관련 뉴스 읽기:

태그 :

책임 부인

줄 안 트러스트 프로젝트 지침, 이 페이지에 제공된 정보는 법률, 세금, 투자, 재정 또는 기타 형태의 조언을 제공하기 위한 것이 아니며 해석되어서도 안 됩니다. 손실을 감수할 수 있는 만큼만 투자하고 의심스러운 경우 독립적인 재정 조언을 구하는 것이 중요합니다. 자세한 내용은 이용약관은 물론 발행자나 광고주가 제공하는 도움말 및 지원 페이지를 참조하시기 바랍니다. MetaversePost 는 정확하고 편견 없는 보고를 위해 최선을 다하고 있지만 시장 상황은 예고 없이 변경될 수 있습니다.

저자에 관하여

Damir는 팀 리더, 제품 관리자 및 편집자입니다. Metaverse Post, AI/ML, AGI, LLM, Metaverse 및 Web3-관련 분야. 그의 기사는 매달 백만 명이 넘는 사용자의 엄청난 청중을 끌어들입니다. 그는 SEO 및 디지털 마케팅 분야에서 10년의 경험을 가진 전문가로 보입니다. Damir는 Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto 및 기타 간행물. UAE, 터키, 러시아, CIS를 오가며 디지털 유목민으로 활동하고 있습니다. Damir는 끊임없이 변화하는 인터넷 환경에서 성공하는 데 필요한 비판적 사고 기술을 제공했다고 믿는 물리학 학사 학위를 받았습니다.

더 많은 기사

다미르 얄랄로프