Futureverse חושפת את JEN-1: מודל בינה מלאכותית מהפכנית ליצירת טקסט למוזיקה בזמן אמת
בקיצור
Futureverse, חברת AI וטכנולוגיית metaverse פורצת הדרך, הציגה את JEN-1, מודל AI המיועד ליצירת טקסט למוזיקה.
JEN-1 מייצג קפיצת מדרגה יוצאת דופן בתחום הבינה המלאכותית המוזיקלית על ידי השגת רמות חסרות תקדים של יישור טקסט-מוזיקה ואיכות מוזיקה, וכל זאת תוך שמירה על יעילות חישובית יוצאת דופן.
Futureverse, חברת AI ו-metaverse טכנולוגיה ותוכן, הכריזה על השקת JEN-1, מודל AI חדש ליצירת טקסט למוזיקה. JEN-1 הוא התקדמות משמעותית בתחום הבינה המלאכותית של מוזיקה, מכיוון שהוא הדגם הראשון שהשיג ביצועים מתקדמים ביישור טקסט-מוזיקה ואיכות מוזיקה תוך שמירה על יעילות חישובית.
"אנו מעריכים בהרחבה את JEN-1 מול קווי בסיס עדכניים על פני מדדים אובייקטיביים והערכות אנושיות. התוצאות מראות ש-JEN-1 מייצר מוזיקה באיכות גבוהה יותר מבחינה תפיסתית (85.7/100) בהשוואה לשיטות הטובות ביותר הנוכחיות (83.8/100)", כתב Futureverse.
יצירת מוזיקה מטקסט היא קשה בגלל האופי המורכב של עיבודים מוזיקליים והצורך בקצב דגימה גבוה. לפי העיתון של Futureverse, JEN-1 יכול להתגבר על האתגרים הללו שכן מודל הדיפוזיה שלו מבוסס על אימון אוטורגרסיבי ולא אוטורגרסיבי. זה מאפשר ל-JEN-1 ליצור מוזיקה מציאותית ויצירתית.
בגלל היעילות החישובית שלו, אפשר להשתמש ב-JEN-1 ליצירת מוזיקה בזמן אמת, מה שפותח אפשרויות חדשות להפקה מוזיקלית, ביצועים חיים ומציאות מדומה.
מודל הבינה המלאכותית משתמש במקודד אוטומטי מיוחד ו מודל דיפוזיה להפקה ישירה של אודיו סטריאו מפורט בקצב דגימה גבוה של 48kHz. יתר על כן, JEN-1 מונע את אובדן האיכות הרגיל בעת המרת תכונות אודיו. המודל מאומן במספר משימות, כולל יצירת מוזיקה, המשך רצפי מוזיקה ומילוי חלקים חסרים, מה שהופך אותו למגוון.
JEN-1 גם משלב בחוכמה שיטות אוטורגרסיביות ולא-אוטו-רגרסיביות כדי לאזן את הפשרה בין לכידת תלות ב מוסיקה ולייצר אותו ביעילות. בנוסף, מודל הבינה המלאכותית משתמש בטכניקות למידה חכמות והוא מאומן לטפל בהיבטים מוזיקליים שונים בבת אחת.
JEN-1 מול MusicLM, MusicGen ודגמי AI אחרים
Futureverse משווה את JEN-1 עם הדגמים העדכניים ביותר, כגון MusicLM מגוגל ו-MusicGen מ-Meta, ומדגימה שהגישה שלו מניבה תוצאות טובות יותר בנאמנות ובריאליזם.
ההערכה התבססה על הביצועים של מודלים שונים במערך הבדיקות של MusicCaps, שהוא מערך נתונים של צמדי מוזיקה וטקסט. Futureverse השתמשה הן במדדים כמותיים והן במדדים איכותיים כדי להעריך את המודלים. מדדים כמותיים כללו את ציון ה-FAD (נאמנות-מודעות-התנתקות) ואת ציון ה-CLAP (המשכיות-ו-Local-Anomaly-Penalties). מדדים איכותיים כללו הערכות אנושיות לגבי האיכות וההתאמת המוזיקה שנוצרה.
התוצאות הראו ש-JEN-1 עלה על המודלים האחרים במדדים כמותיים ואיכותיים. ל-JEN-1 היו ציוני FAD ו-CLAP הגבוהים ביותר וקיבל את הציונים הגבוהים ביותר ממעריכים אנושיים. בנוסף, JEN-1 היה יעיל יותר מבחינה חישובית משאר הדגמים, עם רק 22.6% מהפרמטרים של MusicGen ו-57.7% מהפרמטרים של Noise2Music.
JEN-1 הוא סימן לפוטנציאל הגובר של AI בתעשיית המוזיקה. AI כבר משמש ליצירת מוזיקה, אבל JEN-1 הוא צעד משמעותי קדימה. זהו המודל הראשון שהשיג ביצועים עדכניים הן במדדים כמותיים והן במדדים איכותיים, והוא גם יעיל יותר מבחינה חישובית ממודלים קודמים.
קרא עוד:
- 20 הדגימות המובילות של טקסט למוזיקה בינה מלאכותית עם הנחיות מאת מוברט
- Google AI הכריזה על מחולל הטקסט למוזיקה הראשון אי פעם AudioLM
- MusicLM: מודל AI חדש של טקסט למוזיקה ותמונה למוזיקה מגוגל
- Futureverse מאחדת כוחות עם מיזמים יוצאי דופן עבור תוכנית האקסלרטור של מחנה הבסיס Futureverse
כתב ויתור
בקנה אחד עם הנחיות פרויקט אמון, אנא שים לב שהמידע המסופק בדף זה אינו מיועד ואין לפרש אותו כייעוץ משפטי, מס, השקעות, פיננסי או כל צורה אחרת של ייעוץ. חשוב להשקיע רק את מה שאתה יכול להרשות לעצמך להפסיד ולפנות לייעוץ פיננסי עצמאי אם יש לך ספק. למידע נוסף, אנו מציעים להתייחס לתנאים ולהגבלות וכן לדפי העזרה והתמיכה שסופקו על ידי המנפיק או המפרסם. MetaversePost מחויבת לדיווח מדויק וחסר פניות, אך תנאי השוק עשויים להשתנות ללא הודעה מוקדמת.
על המחבר
אגנה היא עיתונאית שמסקרת את המגמות וההתפתחויות האחרונות ב-metaverse, AI, ו Web3 תעשיות עבור Metaverse Post. התשוקה שלה לספר סיפורים הובילה אותה לערוך ראיונות רבים עם מומחים בתחומים אלה, כשהם מחפשים תמיד לחשוף סיפורים מרגשים ומרתקים. אגנה היא בעלת תואר ראשון בספרות ובעלת רקע נרחב בכתיבה על מגוון רחב של נושאים לרבות נסיעות, אמנות ותרבות. היא גם התנדבה כעורכת בארגון לזכויות בעלי חיים, שם סייעה להעלות את המודעות לנושאים של רווחת בעלי חיים. צור איתה קשר [מוגן בדוא"ל].
מאמרים נוספים
אגנה היא עיתונאית שמסקרת את המגמות וההתפתחויות האחרונות ב-metaverse, AI, ו Web3 תעשיות עבור Metaverse Post. התשוקה שלה לספר סיפורים הובילה אותה לערוך ראיונות רבים עם מומחים בתחומים אלה, כשהם מחפשים תמיד לחשוף סיפורים מרגשים ומרתקים. אגנה היא בעלת תואר ראשון בספרות ובעלת רקע נרחב בכתיבה על מגוון רחב של נושאים לרבות נסיעות, אמנות ותרבות. היא גם התנדבה כעורכת בארגון לזכויות בעלי חיים, שם סייעה להעלות את המודעות לנושאים של רווחת בעלי חיים. צור איתה קשר [מוגן בדוא"ל].
