Το Futureverse αποκαλύπτει το JEN-1: Επαναστατικό μοντέλο AI για δημιουργία κειμένου σε μουσική σε πραγματικό χρόνο


Εν συντομία
Η Futureverse, μια πρωτοποριακή εταιρεία τεχνολογίας τεχνητής νοημοσύνης και μεταστροφών, παρουσίασε το JEN-1, ένα μοντέλο τεχνητής νοημοσύνης που έχει σχεδιαστεί για δημιουργία κειμένου σε μουσική.
Το JEN-1 αντιπροσωπεύει ένα αξιοσημείωτο άλμα προς τα εμπρός στη μουσική AI, επιτυγχάνοντας πρωτοφανή επίπεδα ευθυγράμμισης κειμένου-μουσικής και ποιότητας μουσικής, όλα αυτά διατηρώντας παράλληλα αξιοσημείωτη υπολογιστική απόδοση.

Η Futureverse, μια εταιρεία τεχνολογίας και περιεχομένου AI και metaverse, ανακοίνωσε την κυκλοφορία του JEN-1, ενός νέου μοντέλου AI για δημιουργία κειμένου σε μουσική. Το JEN-1 είναι μια σημαντική πρόοδος στη μουσική AI, καθώς είναι το πρώτο μοντέλο που επιτυγχάνει κορυφαίες επιδόσεις σε ευθυγράμμιση κειμένου-μουσικής και ποιότητα μουσικής, διατηρώντας παράλληλα την υπολογιστική απόδοση.
«Αξιολογούμε εκτενώς το JEN-1 με βάση τις βασικές γραμμές αιχμής σε αντικειμενικές μετρήσεις και ανθρώπινες αξιολογήσεις. Τα αποτελέσματα δείχνουν ότι το JEN-1 παράγει μουσική αντιληπτικά υψηλότερης ποιότητας (85.7/100) σε σύγκριση με τις τρέχουσες καλύτερες μεθόδους (83.8/100)», έγραψε το Futureverse.
Η δημιουργία μουσικής από κείμενο είναι δύσκολη λόγω της περίπλοκης φύσης των μουσικών ρυθμίσεων και της ανάγκης για υψηλό ποσοστό δειγματοληψίας. Σύμφωνα με Το χαρτί του Futureverse, το JEN-1 μπορεί να ξεπεράσει αυτές τις προκλήσεις, καθώς το μοντέλο διάχυσής του βασίζεται σε αυτοπαλινδρομική και μη αυτοπαλινδρομική εκπαίδευση. Αυτό επιτρέπει στο JEN-1 να παράγει μουσική που είναι ρεαλιστική και δημιουργική.
Λόγω της υπολογιστικής του αποτελεσματικότητας, είναι δυνατή η χρήση του JEN-1 για τη δημιουργία μουσικής σε πραγματικό χρόνο, γεγονός που ανοίγει νέες δυνατότητες για παραγωγή μουσικής, ζωντανή απόδοση και εικονική πραγματικότητα.
Το μοντέλο AI χρησιμοποιεί έναν ειδικό αυτόματο κωδικοποιητή και μοντέλο διάχυσης για άμεση παραγωγή λεπτομερούς στερεοφωνικού ήχου σε υψηλό ρυθμό δειγματοληψίας 48 kHz. Επιπλέον, το JEN-1 αποφεύγει τη συνήθη απώλεια ποιότητας κατά τη μετατροπή χαρακτηριστικών ήχου. Το μοντέλο εκπαιδεύεται σε πολλαπλές εργασίες, συμπεριλαμβανομένης της δημιουργίας μουσικής, της συνέχισης των μουσικών ακολουθιών και της συμπλήρωσης τμημάτων που λείπουν, καθιστώντας το ευέλικτο.
Το JEN-1 συνδυάζει επίσης έξυπνα αυτοπαλινδρομικές και μη αυτοπαλινδρομικές μεθόδους για να εξισορροπήσει την αντιστάθμιση μεταξύ της σύλληψης εξαρτήσεων σε μουσική και τη δημιουργία του αποτελεσματικά. Επιπλέον, το μοντέλο AI χρησιμοποιεί τεχνικές έξυπνης μάθησης και είναι εκπαιδευμένο να χειρίζεται διάφορες μουσικές πτυχές ταυτόχρονα.
JEN-1 Versus MusicLM, MusicGen και άλλα μοντέλα AI
Το Futureverse συγκρίνει το JEN-1 με τα τρέχοντα μοντέλα τελευταίας τεχνολογίας, όπως το MusicLM από την Google και το MusicGen από τη Meta, και αποδεικνύει ότι η προσέγγισή του παράγει καλύτερα αποτελέσματα σε πιστότητα και ρεαλισμό.
Η αξιολόγηση βασίστηκε στην απόδοση διαφορετικών μοντέλων στο δοκιμαστικό σετ MusicCaps, το οποίο είναι ένα σύνολο δεδομένων από ζεύγη μουσικής και κειμένου. Η Futureverse χρησιμοποίησε τόσο ποσοτικά όσο και ποιοτικά μέτρα για την αξιολόγηση των μοντέλων. Τα ποσοτικά μέτρα περιελάμβαναν τη βαθμολογία FAD (Fidelity-Awareness-Disentanglement) και τη βαθμολογία CLAP (Continuity-and-Local-Anomaly-Penalties). Τα ποιοτικά μέτρα περιελάμβαναν ανθρώπινες αξιολογήσεις της ποιότητας και της ευθυγράμμισης της παραγόμενης μουσικής.
Τα αποτελέσματα έδειξαν ότι το JEN-1 ξεπέρασε τα άλλα μοντέλα σε ποσοτικά και ποιοτικά μέτρα. Το JEN-1 είχε τις υψηλότερες βαθμολογίες FAD και CLAP και έλαβε τις υψηλότερες βαθμολογίες από ανθρώπους αξιολογητές. Επιπλέον, το JEN-1 ήταν πιο αποδοτικό υπολογιστικά από τα άλλα μοντέλα, με μόνο το 22.6% των παραμέτρων του MusicGen και το 57.7% των παραμέτρων του Noise2Music.
Το JEN-1 είναι ένα σημάδι των αυξανόμενων δυνατοτήτων της τεχνητής νοημοσύνης στη μουσική βιομηχανία. Το AI χρησιμοποιείται ήδη για τη δημιουργία μουσικής, αλλά το JEN-1 είναι ένα σημαντικό βήμα προς τα εμπρός. Είναι το πρώτο μοντέλο που επιτυγχάνει κορυφαίες επιδόσεις τόσο σε ποσοτικά όσο και σε ποιοτικά μέτρα, ενώ είναι επίσης πιο αποδοτικό υπολογιστικά από τα προηγούμενα μοντέλα.
Διαβάστε περισσότερα:
- Κορυφαία 20 δείγματα AI Text-to-Music με προτροπές από τον Mubert
- Η Google AI ανακοίνωσε την πρώτη συσκευή δημιουργίας κειμένου σε μουσική AudioLM
- MusicLM: ένα νέο μοντέλο AI από κείμενο σε μουσική και εικόνα σε μουσική από την Google
- Το Futureverse ενώνει τις δυνάμεις του με Outlier Ventures για το πρόγραμμα επιτάχυνσης του Futureverse Base Camp
Αποποίηση Eυθυνών
Σύμφωνα με το Οδηγίες του έργου Trust, σημειώστε ότι οι πληροφορίες που παρέχονται σε αυτήν τη σελίδα δεν προορίζονται και δεν πρέπει να ερμηνεύονται ως νομικές, φορολογικές, επενδυτικές, χρηματοοικονομικές ή οποιαδήποτε άλλη μορφή συμβουλής. Είναι σημαντικό να επενδύσετε μόνο ό,τι έχετε την πολυτέλεια να χάσετε και να αναζητήσετε ανεξάρτητες οικονομικές συμβουλές εάν έχετε οποιεσδήποτε αμφιβολίες. Για περισσότερες πληροφορίες, προτείνουμε να ανατρέξετε στους όρους και τις προϋποθέσεις, καθώς και στις σελίδες βοήθειας και υποστήριξης που παρέχονται από τον εκδότη ή τον διαφημιστή. MetaversePost δεσμεύεται για ακριβείς, αμερόληπτες αναφορές, αλλά οι συνθήκες της αγοράς υπόκεινται σε αλλαγές χωρίς προειδοποίηση.
Σχετικά με το Συγγραφέας
Η Agne είναι μια δημοσιογράφος που καλύπτει τις τελευταίες τάσεις και εξελίξεις στο metaverse, AI και Web3 βιομηχανίες για την Metaverse Post. Το πάθος της για την αφήγηση την οδήγησε να πραγματοποιήσει πολυάριθμες συνεντεύξεις με ειδικούς σε αυτούς τους τομείς, επιδιώκοντας πάντα να αποκαλύψει συναρπαστικές και συναρπαστικές ιστορίες. Η Agne είναι κάτοχος πτυχίου στη λογοτεχνία και έχει εκτεταμένο υπόβαθρο γραφής για ένα ευρύ φάσμα θεμάτων, όπως ταξίδια, τέχνη και πολιτισμός. Έχει επίσης εργαστεί εθελοντικά ως συντάκτρια για την οργάνωση για τα δικαιώματα των ζώων, όπου βοήθησε στην ευαισθητοποίηση σχετικά με θέματα καλής διαβίωσης των ζώων. Επικοινωνήστε μαζί της [προστασία μέσω email].
Περισσότερα άρθρα

Η Agne είναι μια δημοσιογράφος που καλύπτει τις τελευταίες τάσεις και εξελίξεις στο metaverse, AI και Web3 βιομηχανίες για την Metaverse Post. Το πάθος της για την αφήγηση την οδήγησε να πραγματοποιήσει πολυάριθμες συνεντεύξεις με ειδικούς σε αυτούς τους τομείς, επιδιώκοντας πάντα να αποκαλύψει συναρπαστικές και συναρπαστικές ιστορίες. Η Agne είναι κάτοχος πτυχίου στη λογοτεχνία και έχει εκτεταμένο υπόβαθρο γραφής για ένα ευρύ φάσμα θεμάτων, όπως ταξίδια, τέχνη και πολιτισμός. Έχει επίσης εργαστεί εθελοντικά ως συντάκτρια για την οργάνωση για τα δικαιώματα των ζώων, όπου βοήθησε στην ευαισθητοποίηση σχετικά με θέματα καλής διαβίωσης των ζώων. Επικοινωνήστε μαζί της [προστασία μέσω email].