A Futureverse bemutatja a JEN-1 forradalmi mesterséges intelligencia modelljét a valós idejű szöveg-zene generálásához
Röviden
A Futureverse, az AI és metaverse technológia úttörő vállalata bemutatta a JEN-1-et, a szöveg-zene generálására tervezett mesterséges intelligencia modellt.
A JEN-1 figyelemre méltó előrelépést jelent a zenei mesterséges intelligencia terén azáltal, hogy soha nem látott szintű szöveg-zene összehangolást és zenei minőséget ér el, miközben megőrzi a figyelemre méltó számítási hatékonyságot.
A Futureverse, a mesterséges intelligenciával és metaverzum technológiával és tartalommal foglalkozó vállalat bejelentette, hogy elindítja a JEN-1-et, egy új mesterséges intelligencia modellt a szöveg-zene generálására. A JEN-1 jelentős előrelépés a zenei mesterséges intelligencia terén, mivel ez az első olyan modell, amely a legmodernebb teljesítményt nyújtja a szöveg-zene összehangolásban és a zenei minőségben, miközben megőrzi a számítási hatékonyságot.
„Kiterjedten értékeljük a JEN-1-et a legmodernebb alapvonalakhoz képest objektív mérőszámok és emberi értékelések alapján. Az eredmények azt mutatják, hogy a JEN-1 érzékelésileg jobb minőségű zenét állít elő (85.7/100), mint a jelenlegi legjobb módszerek (83.8/100)” – írta a Futureverse.
Szövegből zenét létrehozni nehéz a zenei feldolgozások bonyolult természete és a magas mintavételi gyakoriság miatt. Alapján Futureverse papírja, a JEN-1 képes leküzdeni ezeket a kihívásokat, mivel diffúziós modellje autoregresszív és nem autoregresszív tréningen alapul. Ez lehetővé teszi a JEN-1 számára, hogy valósághű és kreatív zenét generáljon.
Számítási hatékonysága miatt a JEN-1 segítségével valós időben lehet zenét generálni, ami új lehetőségeket nyit meg a zenegyártás, az élő előadás és a virtuális valóság számára.
Az AI modell speciális autoencodert és diffúziós modell részletes sztereó hang közvetlen előállítása magas, 48 kHz-es mintavételezési frekvenciával. Sőt, a JEN-1 elkerüli a szokásos minőségromlást az audiojellemzők konvertálásakor. A modell több feladatra is kiképzett, beleértve a zene generálását, a zenei sorozatok folytatását és a hiányzó részek kitöltését, így sokoldalúvá válik.
A JEN-1 ügyesen kombinálja az autoregresszív és nem autoregresszív módszereket is, hogy egyensúlyt teremtsen a függőségek rögzítése között. zene és hatékonyan generálja azt. Ezenkívül az AI-modell intelligens tanulási technikákat alkalmaz, és arra van kiképezve, hogy egyszerre kezelje a különböző zenei szempontokat.
JEN-1 Versus MusicLM, MusicGen és egyéb mesterséges intelligencia modellek
A Futureverse összehasonlítja a JEN-1-et a jelenlegi legmodernebb modellekkel, például a Google MusicLM-mel és a Meta MusicGen-nel, és bemutatja, hogy megközelítése jobb eredményeket hoz a hűségben és a valósághűségben.
Az értékelés a MusicCaps tesztkészlet különböző modelljeinek teljesítményén alapult, amely zene és szöveg párok adatkészlete. A Futureverse kvantitatív és minőségi mérőszámokat is alkalmazott a modellek értékeléséhez. A kvantitatív mérőszámok közé tartozott a FAD (Fidelity-Awareness-Disentanglement) pontszám és a CLAP (Continuity-and-Local-anomaly-Penalties) pontszám. A minőségi intézkedések közé tartozott az előállított zene minőségének és összehangolásának emberi értékelése.
Az eredmények azt mutatták, hogy a JEN-1 felülmúlta a többi modellt mennyiségi és minőségi mérőszámok tekintetében. A JEN-1 kapta a legmagasabb FAD és CLAP pontszámot, és a legmagasabb pontszámot kapta az emberi értékelőktől. Ráadásul a JEN-1 számításilag hatékonyabb volt, mint a többi modell, a MusicGen paramétereinek mindössze 22.6%-ával, a Noise57.7Music paramétereinek pedig 2%-ával.
A JEN-1 az AI zeneiparban rejlő növekvő potenciáljának jele. A mesterséges intelligenciát már használják zene létrehozására, de a JEN-1 jelentős előrelépés. Ez az első modell, amely a legkorszerűbb teljesítményt éri el mind mennyiségi, mind minőségi mérőszámok tekintetében, és számításilag is hatékonyabb, mint a korábbi modellek.
Bővebben:
- A 20 legjobb mesterséges intelligencia szöveg-zene minta Mubert utasításaival
- A Google AI bejelentette az első szöveg-zene generátor audioLM-t
- MusicLM: a Google új szöveg-zene és kép-zene AI modellje
- A Futureverse egyesíti erőit az Outlier Ventures-szel a Futureverse Base Camp Accelerator Programhoz
Jogi nyilatkozat
Összhangban a A Trust Project irányelvei, kérjük, vegye figyelembe, hogy az ezen az oldalon közölt információk nem minősülnek jogi, adózási, befektetési, pénzügyi vagy bármilyen más formájú tanácsnak, és nem is értelmezhetők. Fontos, hogy csak annyit fektessen be, amennyit megengedhet magának, hogy elveszítsen, és kérjen független pénzügyi tanácsot, ha kétségei vannak. További információkért javasoljuk, hogy tekintse meg a szerződési feltételeket, valamint a kibocsátó vagy hirdető által biztosított súgó- és támogatási oldalakat. MetaversePost elkötelezett a pontos, elfogulatlan jelentéstétel mellett, de a piaci feltételek előzetes értesítés nélkül változhatnak.
A szerzőről
Agne újságíró, aki a metaverzum legújabb trendjeivel és fejleményeivel foglalkozik, az AI és Web3 iparágak számára Metaverse Post. A történetmesélés iránti szenvedélye arra késztette, hogy számos interjút készített e területek szakértőivel, mindig izgalmas és lebilincselő történetek feltárására törekedve. Agne irodalomból bachelor diplomát szerzett, és széleskörű írási háttérrel rendelkezik számos témakörben, beleértve az utazást, a művészetet és a kultúrát. Önkéntesként jelentkezett szerkesztőként az állatvédő szervezetnél is, ahol segített felhívni a figyelmet az állatjóléti kérdésekre. Vegye fel vele a kapcsolatot [e-mail védett].
További cikkek
Agne újságíró, aki a metaverzum legújabb trendjeivel és fejleményeivel foglalkozik, az AI és Web3 iparágak számára Metaverse Post. A történetmesélés iránti szenvedélye arra késztette, hogy számos interjút készített e területek szakértőivel, mindig izgalmas és lebilincselő történetek feltárására törekedve. Agne irodalomból bachelor diplomát szerzett, és széleskörű írási háttérrel rendelkezik számos témakörben, beleértve az utazást, a művészetet és a kultúrát. Önkéntesként jelentkezett szerkesztőként az állatvédő szervezetnél is, ahol segített felhívni a figyelmet az állatjóléti kérdésekre. Vegye fel vele a kapcsolatot [e-mail védett].
