Η Databricks δημοσιεύει το Dolly 2.0, το πρώτο εμπορικά διαθέσιμο ανοιχτού κώδικα 12B Chat-LLM
Εν συντομία
Η Databricks ανακοίνωσε την κυκλοφορία του Dolly 2.0 ως το πρώτο εμπορικά διαθέσιμο ανοιχτού κώδικα 12B Chat-LLM, επιτρέποντας στις εταιρείες να δημιουργούν ισχυρά μοντέλα γλώσσας χωρίς να επενδύουν σε ακριβά συμπλέγματα GPU.
Τα Databricks έχουν ανακοίνωσε την κυκλοφορία του Dolly 2.0 ως το πρώτο εμπορικά διαθέσιμο ανοιχτού κώδικα 12B Chat-LLM. Η Dolly είναι μια σημαντική ανακάλυψη για τη βιομηχανία μηχανικής εκμάθησης, επιτρέποντας στις εταιρείες να δημιουργούν ισχυρά μοντέλα γλώσσας —όπως αυτοπαλινδρομικά LLM με υποστήριξη διαλόγου — χωρίς να χρειάζεται να επενδύσουν σε ακριβά συμπλέγματα GPU.
| Διαβάστε περισσότερα: Πώς να το χρησιμοποιήσετε: ChatGPT (GPT-4) δωρεάν για πάντα |
Για να αποκτήσει το μοντέλο γλώσσας ανοιχτού κώδικα, η Databricks χρειαζόταν ένα μεγάλο σύνολο δεδομένων υψηλής ποιότητας. Αφού εξέτασε αρχικά το Alpaca GPT-3 σύνολο δεδομένων και άλλα σύνολα δεδομένων ανοιχτού κώδικα που δεν επιτρέπουν εμπορική χρήση, αποφάσισαν να δημιουργήσουν το δικό τους σύνολο δεδομένων υψηλής ποιότητας. Για να το κάνουν αυτό, απασχόλησαν 5,000 άτομα και τους ζήτησαν να γράψουν πολλά παραδείγματα που θα χρησιμοποιούνταν για να εκπαιδεύσουν ένα αυτοπαλινδρομικό LLM ικανό απλώς να συνεχίσει το κείμενο και να μην διεξάγει διάλογο. Με τη βοήθεια μεγάλων κινήτρων, όπως μπόνους για τη συγγραφή των καλύτερων παραδειγμάτων, μπόρεσαν να συγκεντρώσουν ένα εντυπωσιακό 15,000 δείγματα δεδομένων.
Η Databricks έκανε το επόμενο βήμα και ενσωμάτωσε το EleutherAI's Πυθία-12Β μοντέλο γλώσσας με άδεια MIT και το επανεκπαίδευσαν στο δικό τους σύνολο δεδομένων, με αποτέλεσμα το Dolly 2.0. Το Dolly 2.0 κυκλοφόρησε με άδεια MIT, μαζί με τον συνοδευτικό κωδικό. Με την κυκλοφορία του Dolly 2.0, η βιομηχανία μηχανικής εκμάθησης διαθέτει πλέον ένα ισχυρό εργαλείο για τη δημιουργία ισχυρών μοντέλων γλώσσας με οικονομικά αποδοτικό τρόπο. Αυτό μπορεί να χρησιμοποιηθεί τόσο από εταιρείες όσο και από ιδιώτες που θέλουν να δημιουργήσουν ισχυρές εφαρμογές που μπορούν να κατανοήσουν και να επεξεργαστούν περίπλοκη γλώσσα.
Συνολικά, η έναρξη του Ντόλι 2.0 καθώς το πρώτο εμπορικά διαθέσιμο ανοιχτού κώδικα 12B Chat-LLM είναι ένα σημαντικό ορόσημο για τη βιομηχανία μηχανικής εκμάθησης. Εκμεταλλευόμενος την άδεια MIT και δημιουργώντας το δικό της σύνολο δεδομένων υψηλής ποιότητας, η Databricks έχει κάνει ισχυρά μοντέλα γλώσσας προσβάσιμα τόσο σε εταιρείες όσο και σε ιδιώτες. Το Dolly 2.0 πρόκειται να φέρει επανάσταση στη βιομηχανία και είναι ένα σημαντικό βήμα προς τα εμπρός για τη μηχανική μάθηση.
Οι χρήστες περιμένουν τώρα τους προγραμματιστές να κβαντίσουν την Dolly σε 4 bit και να την επιταχύνουν ώστε να τρέξει στη CPU, καθώς και μια απάντηση από το OpenAssistant, το οποίο αναμένεται να παράσχει το μοντέλο τους τις επόμενες ημέρες.
- Το NTIA ζητά δημόσια σχόλια για πιθανές ρυθμίσεις που ρυθμίζουν τα συστήματα AI Μου αρέσει ChatGPT να βοηθήσει την κυβέρνηση Μπάιντεν να διασφαλίσει ότι λειτουργούν όπως είχε υποσχεθεί. Το NTIA δημοσίευσε μια δήλωση σχετικά με τη θέσπιση κανόνων λογοδοσίας AI, η οποία θα μπορούσε να αποτρέψει μελλοντικές ατυχίες και να ελαχιστοποιήσει τους κινδύνους από υποθετικές απειλές.
Διαβάστε περισσότερα για το AI:
Αποποίηση ευθυνών
Σύμφωνα με το Οδηγίες του έργου Trust, σημειώστε ότι οι πληροφορίες που παρέχονται σε αυτήν τη σελίδα δεν προορίζονται και δεν πρέπει να ερμηνεύονται ως νομικές, φορολογικές, επενδυτικές, χρηματοοικονομικές ή οποιαδήποτε άλλη μορφή συμβουλής. Είναι σημαντικό να επενδύσετε μόνο ό,τι έχετε την πολυτέλεια να χάσετε και να αναζητήσετε ανεξάρτητες οικονομικές συμβουλές εάν έχετε οποιεσδήποτε αμφιβολίες. Για περισσότερες πληροφορίες, προτείνουμε να ανατρέξετε στους όρους και τις προϋποθέσεις, καθώς και στις σελίδες βοήθειας και υποστήριξης που παρέχονται από τον εκδότη ή τον διαφημιστή. MetaversePost δεσμεύεται για ακριβείς, αμερόληπτες αναφορές, αλλά οι συνθήκες της αγοράς υπόκεινται σε αλλαγές χωρίς προειδοποίηση.
Σχετικά με το Συγγραφέας
Ο Damir είναι ο αρχηγός της ομάδας, ο διευθυντής προϊόντων και ο συντάκτης στο Metaverse Post, καλύπτοντας θέματα όπως AI/ML, AGI, LLMs, Metaverse και Web3-σχετικά πεδία. Τα άρθρα του προσελκύουν ένα τεράστιο κοινό άνω του ενός εκατομμυρίου χρηστών κάθε μήνα. Φαίνεται να είναι ειδικός με 10ετή εμπειρία στο SEO και το ψηφιακό μάρκετινγκ. Ο Damir έχει αναφερθεί στο Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto και άλλες εκδόσεις. Ταξιδεύει μεταξύ των ΗΑΕ, της Τουρκίας, της Ρωσίας και της ΚΑΚ ως ψηφιακός νομάδας. Ο Damir απέκτησε πτυχίο στη φυσική, το οποίο πιστεύει ότι του έχει δώσει τις δεξιότητες κριτικής σκέψης που απαιτούνται για να είναι επιτυχής στο συνεχώς μεταβαλλόμενο τοπίο του Διαδικτύου.
Περισσότερα άρθρα
Ο Damir είναι ο αρχηγός της ομάδας, ο διευθυντής προϊόντων και ο συντάκτης στο Metaverse Post, καλύπτοντας θέματα όπως AI/ML, AGI, LLMs, Metaverse και Web3-σχετικά πεδία. Τα άρθρα του προσελκύουν ένα τεράστιο κοινό άνω του ενός εκατομμυρίου χρηστών κάθε μήνα. Φαίνεται να είναι ειδικός με 10ετή εμπειρία στο SEO και το ψηφιακό μάρκετινγκ. Ο Damir έχει αναφερθεί στο Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto και άλλες εκδόσεις. Ταξιδεύει μεταξύ των ΗΑΕ, της Τουρκίας, της Ρωσίας και της ΚΑΚ ως ψηφιακός νομάδας. Ο Damir απέκτησε πτυχίο στη φυσική, το οποίο πιστεύει ότι του έχει δώσει τις δεξιότητες κριτικής σκέψης που απαιτούνται για να είναι επιτυχής στο συνεχώς μεταβαλλόμενο τοπίο του Διαδικτύου.
