МусицЛМ: нови АИ модел текст-у-музику и слику-музику од Гоогле-а
Укратко
Гоогле представља МусицЛМ, модел за генерисање музике високе верности из текстуалних описа.
МусицЛМ може бити условљен и текстом и мелодијом тако што може да трансформише звиждане и певушене мелодије у складу са стилом описаним у текстуалном наслову.
Модел може генерише музику у различитим жанровима, укључујући класику, џез и рок.
Гоогле представља МусицЛМ, модел за генерисање музике високе верности из текстуалних описа као што је „смирујућа мелодија виолине подржана изобличеним гитарским рифом“. МусицЛМ претвара процес условног генерисања музике као задатак хијерархијског моделирања секвенце до секвенце и генерише музику на 24 кХз која остаје конзистентна током неколико минута.
Гоогле експерименти показују да МусицЛМ надмашује претходне системе, како по квалитету звука, тако и по придржавању описа текста. Штавише, показује да МусицЛМ може бити условљен и текстом и мелодијом тако што може да трансформише звиждане и певушене мелодије у складу са стилом описаним у текстуалном наслову. Да бисмо подржали будућа истраживања, јавно објављујемо МусицЦапс, скуп података састављен од 5.5 хиљада парова музика-текст са богатим текстуалним описима које су дали стручњаци за људе.
| Повезани чланак: Текст у 3Д: Гоогле је развио неуронску мрежу која генерише 3Д моделе из текстуалних описа |
МусицЛМ модел је обучен на великом корпусу музичких партитура, што је омогућило АИ да научи структуру музике. Модел може генерише музику у различитим жанровима, укључујући класику, џез и рок. Поред тога, АИ модел може креирати нове, оригиналне композиције.
МусицЛМ модел је важан развој у области музике генерисане вештачком интелигенцијом. Модел представља значајан напредак у односу на претходне моделе, који су били ограничени на краће музичке комаде или су могли да генеришу само једноставне мелодије. Нови модел отвара могућност коришћења вештачке интелигенције за генерисање дугих, сложених делова музике, који се могу користити у филмовима, видео играма или другим медијима.
Нови АИ модел може да генерише дугу музику генерације до пет минута.
| Повезани чланак: Stable Diffusion може креирати нову музику генерисањем спектрограма на основу текста |
АИ модел може да креира музику користећи титлове из игара и филмова.
Поред тога, АИ модел може да генерише музику користећи слике као улаз.
Прочитајте више о АИ у музичкој индустрији:
Одрицање од одговорности
У складу са Смернице пројекта Труст, имајте на уму да информације дате на овој страници нису намењене и не треба да се тумаче као правни, порески, инвестициони, финансијски или било који други облик савета. Важно је да инвестирате само оно што можете приуштити да изгубите и да тражите независан финансијски савет ако сумњате. За додатне информације, предлажемо да погледате одредбе и услове, као и странице помоћи и подршке које пружа издавач или оглашивач. MetaversePost је посвећен тачном, непристрасном извештавању, али тржишни услови су подложни променама без претходне најаве.
О аутору
Дамир је вођа тима, менаџер производа и уредник у Metaverse Post, покривајући теме као што су АИ/МЛ, АГИ, ЛЛМ, Метаверсе и Web3-сродна поља. Његови чланци привлаче огромну публику од преко милион корисника сваког месеца. Чини се да је стручњак са 10 година искуства у СЕО и дигиталном маркетингу. Дамир се помиње у Масхабле, Виред, Cointelegraph, Тхе Нев Иоркер, Инсиде.цом, Ентрепренеур, БеИнЦрипто и друге публикације. Путује између УАЕ, Турске, Русије и ЗНД као дигитални номад. Дамир је стекао диплому физике, за коју верује да му је дало вештине критичког размишљања које су му потребне да буде успешан у свету интернета који се стално мења.
više чланака
Дамир је вођа тима, менаџер производа и уредник у Metaverse Post, покривајући теме као што су АИ/МЛ, АГИ, ЛЛМ, Метаверсе и Web3-сродна поља. Његови чланци привлаче огромну публику од преко милион корисника сваког месеца. Чини се да је стручњак са 10 година искуства у СЕО и дигиталном маркетингу. Дамир се помиње у Масхабле, Виред, Cointelegraph, Тхе Нев Иоркер, Инсиде.цом, Ентрепренеур, БеИнЦрипто и друге публикације. Путује између УАЕ, Турске, Русије и ЗНД као дигитални номад. Дамир је стекао диплому физике, за коју верује да му је дало вештине критичког размишљања које су му потребне да буде успешан у свету интернета који се стално мења.
