Futureverse Meluncurkan JEN-1: Model AI Revolusioner untuk Generasi Text-to-Music Real-time
Singkatnya
Futureverse, perusahaan teknologi AI dan metaverse perintis, telah memperkenalkan JEN-1, model AI yang dirancang untuk generasi teks-ke-musik.
JEN-1 mewakili lompatan maju yang luar biasa dalam AI musik dengan mencapai tingkat penyelarasan teks-musik dan kualitas musik yang belum pernah terjadi sebelumnya, sambil mempertahankan efisiensi komputasi yang luar biasa.
Futureverse, perusahaan teknologi dan konten AI dan metaverse, telah mengumumkan peluncuran JEN-1, model AI baru untuk generasi teks-ke-musik. JEN-1 adalah kemajuan signifikan dalam AI musik, karena ini adalah model pertama yang mencapai performa canggih dalam penyelarasan teks-musik dan kualitas musik sambil mempertahankan efisiensi komputasi.
“Kami secara ekstensif mengevaluasi JEN-1 terhadap baseline canggih di seluruh metrik objektif dan evaluasi manusia. Hasil menunjukkan JEN-1 menghasilkan musik dengan kualitas persepsi yang lebih tinggi (85.7/100) dibandingkan dengan metode terbaik saat ini (83.8/100),” tulis Futureverse.
Membuat musik dari teks itu sulit karena sifat aransemen musik yang rumit dan kebutuhan tingkat pengambilan sampel yang tinggi. Berdasarkan Makalah Futureverse, JEN-1 dapat mengatasi tantangan ini karena model difusinya didasarkan pada pelatihan autoregresif dan non-autoregresif. Ini memungkinkan JEN-1 menghasilkan musik yang realistis dan kreatif.
Karena efisiensi komputasinya, dimungkinkan untuk menggunakan JEN-1 untuk menghasilkan musik secara real-time, yang membuka kemungkinan baru untuk produksi musik, pertunjukan langsung, dan realitas virtual.
Model AI menggunakan autoencoder khusus dan model difusi untuk secara langsung menghasilkan audio stereo mendetail pada tingkat pengambilan sampel tinggi 48kHz. Selain itu, JEN-1 menghindari penurunan kualitas yang biasa terjadi saat mengonversi fitur audio. Model ini dilatih dalam berbagai tugas, termasuk menghasilkan musik, melanjutkan rangkaian musik, dan mengisi bagian yang hilang, sehingga menjadikannya serbaguna.
JEN-1 juga secara cerdik menggabungkan metode autoregresif dan non-autoregresif untuk menyeimbangkan trade-off antara menangkap ketergantungan dalam musik dan menghasilkannya secara efisien. Selain itu, model AI menggunakan teknik pembelajaran cerdas dan dilatih untuk menangani berbagai aspek musik sekaligus.
JEN-1 Versus MusicLM, MusicGen, dan Model AI Lainnya
Futureverse membandingkan JEN-1 dengan model canggih saat ini, seperti MusicLM dari Google dan MusicGen dari Meta, dan menunjukkan bahwa pendekatannya memberikan hasil yang lebih baik dalam fidelitas dan realisme.
Evaluasi tersebut didasarkan pada kinerja berbagai model pada set tes MusicCaps, yang merupakan kumpulan data pasangan musik dan teks. Futureverse menggunakan ukuran kuantitatif dan kualitatif untuk mengevaluasi model. Pengukuran kuantitatif termasuk skor FAD (Fidelity-Awareness-Disentanglement) dan skor CLAP (Continuity-and-Local-Anomaly-Penalties). Pengukuran kualitatif termasuk penilaian manusia terhadap kualitas dan keselarasan musik yang dihasilkan.
Hasilnya menunjukkan bahwa JEN-1 mengungguli model lain dalam pengukuran kuantitatif dan kualitatif. JEN-1 memiliki skor FAD dan CLAP tertinggi dan menerima skor tertinggi dari penilai manusia. Selain itu, JEN-1 lebih efisien secara komputasi dibandingkan model lainnya, dengan hanya 22.6% parameter MusicGen dan 57.7% parameter Noise2Music.
JEN-1 adalah tanda tumbuhnya potensi AI di industri musik. AI sudah digunakan untuk membuat musik, tetapi JEN-1 merupakan langkah maju yang signifikan. Ini adalah model pertama yang mencapai kinerja canggih pada ukuran kuantitatif dan kualitatif, dan juga lebih efisien secara komputasi daripada model sebelumnya.
Baca lebih lanjut:
- 20 sampel Teks-ke-Musik AI teratas dengan petunjuk dari Mubert
- Google AI Mengumumkan Text-to-Music Generator AudioLM yang Pertama
- MusicLM: model AI teks-ke-musik dan gambar-ke-musik baru dari Google
- Futureverse Bergabung dengan Outlier Ventures untuk Program Akselerator Base Camp Futureverse
Penolakan tanggung jawab
Sejalan dengan Percayai pedoman Proyek, harap dicatat bahwa informasi yang diberikan pada halaman ini tidak dimaksudkan untuk dan tidak boleh ditafsirkan sebagai nasihat hukum, pajak, investasi, keuangan, atau bentuk nasihat lainnya. Penting untuk hanya menginvestasikan jumlah yang mampu Anda tanggung kerugiannya dan mencari nasihat keuangan independen jika Anda ragu. Untuk informasi lebih lanjut, kami menyarankan untuk merujuk pada syarat dan ketentuan serta halaman bantuan dan dukungan yang disediakan oleh penerbit atau pengiklan. MetaversePost berkomitmen terhadap pelaporan yang akurat dan tidak memihak, namun kondisi pasar dapat berubah tanpa pemberitahuan.
Tentang Penulis
Agne adalah jurnalis yang meliput tren dan perkembangan terbaru di metaverse, AI, dan Web3 industri untuk Metaverse Post. Kecintaannya pada bercerita telah membawanya melakukan banyak wawancara dengan para ahli di bidang tersebut, selalu berusaha mengungkap cerita yang menarik dan memikat. Agne memegang gelar Sarjana Sastra dan memiliki latar belakang luas dalam menulis tentang berbagai topik termasuk perjalanan, seni, dan budaya. Dia juga menjadi sukarelawan sebagai editor di organisasi hak-hak hewan, di mana dia membantu meningkatkan kesadaran tentang masalah kesejahteraan hewan. Hubungi dia di [email dilindungi].
lebih artikel
Agne adalah jurnalis yang meliput tren dan perkembangan terbaru di metaverse, AI, dan Web3 industri untuk Metaverse Post. Kecintaannya pada bercerita telah membawanya melakukan banyak wawancara dengan para ahli di bidang tersebut, selalu berusaha mengungkap cerita yang menarik dan memikat. Agne memegang gelar Sarjana Sastra dan memiliki latar belakang luas dalam menulis tentang berbagai topik termasuk perjalanan, seni, dan budaya. Dia juga menjadi sukarelawan sebagai editor di organisasi hak-hak hewan, di mana dia membantu meningkatkan kesadaran tentang masalah kesejahteraan hewan. Hubungi dia di [email dilindungi].
