Databricks publie Dolly 2.0, le premier Chat-LLM 12B open source disponible dans le commerce
En bref
Databricks a annoncé le lancement de Dolly 2.0 en tant que premier Chat-LLM 12B open source disponible dans le commerce, permettant aux entreprises de créer des modèles de langage puissants sans investir dans des clusters GPU coûteux.
Databricks a annoncé le lancement de Dolly 2.0 en tant que premier Chat-LLM open source 12B disponible dans le commerce. Dolly est une percée majeure pour l'industrie de l'apprentissage automatique, permettant aux entreprises de créer des modèles de langage puissants, tels que des LLM autorégressifs avec prise en charge du dialogue, sans avoir à investir dans des clusters GPU coûteux.
| Lire la suite: UTILISATION ChatGPT (GPT-4) gratuitement pour toujours |
Pour obtenir son modèle de langage open source, Databricks avait besoin d'un ensemble de données volumineux et de haute qualité. Après avoir d'abord considéré l'Alpaga GPT-3 ensemble de données et d'autres ensembles de données open source qui ne permettent pas une utilisation commerciale, ils ont décidé de créer leur propre ensemble de données de haute qualité. Pour ce faire, ils ont employé 5,000 XNUMX personnes et leur ont demandé d'écrire plusieurs exemples qui serviraient à former un LLM autorégressif capable de simplement poursuivre le texte et non de mener un dialogue. Grâce à d'excellentes incitations, telles que des primes pour la rédaction des meilleurs exemples, ils ont pu rassembler un nombre impressionnant de 15,000 XNUMX échantillons de données.
Databricks est passé à l'étape suivante et a intégré EleutherAI Pythie-12B modèle de langage avec une licence MIT et l'ont recyclé sur leur propre ensemble de données, ce qui a donné Dolly 2.0. Dolly 2.0 a été publié sous une licence MIT, avec le code qui l'accompagne. Avec le lancement de Dolly 2.0, l'industrie de l'apprentissage automatique dispose désormais d'un outil puissant pour créer des modèles de langage robustes de manière rentable. Cela peut être utilisé par les entreprises et les particuliers qui cherchent à créer des applications puissantes capables de comprendre et de traiter un langage complexe.
Dans l'ensemble, le lancement de Chariot 2.0 en tant que premier 12B Chat-LLM open-source disponible dans le commerce, est une étape importante pour l'industrie de l'apprentissage automatique. En tirant parti de la licence MIT et en créant son propre ensemble de données de haute qualité, Databricks a rendu de puissants modèles de langage accessibles aux entreprises et aux particuliers. Dolly 2.0 est sur le point de révolutionner l'industrie et constitue une avancée majeure pour l'apprentissage automatique.
Les utilisateurs attendent maintenant que les développeurs quantifient Dolly en 4 bits et l'accélèrent pour s'exécuter sur le CPU, ainsi qu'une réponse d'OpenAssistant, qui devrait fournir son modèle dans les prochains jours.
- La NTIA sollicite les commentaires du public sur d'éventuelles réglementations réglementer les systèmes d'IA comme ChatGPT pour aider l'administration Biden à s'assurer qu'ils fonctionnent comme promis. La NTIA a publié une déclaration concernant l'élaboration de règles de responsabilité en matière d'IA, qui pourrait prévenir de futurs incidents et minimiser les risques de menaces hypothétiques.
En savoir plus sur l'IA :
Clause de non-responsabilité
En ligne avec la Lignes directrices du projet de confiance, veuillez noter que les informations fournies sur cette page ne sont pas destinées à être et ne doivent pas être interprétées comme des conseils juridiques, fiscaux, d'investissement, financiers ou toute autre forme de conseil. Il est important d’investir uniquement ce que vous pouvez vous permettre de perdre et de demander des conseils financiers indépendants en cas de doute. Pour plus d'informations, nous vous suggérons de vous référer aux conditions générales ainsi qu'aux pages d'aide et de support mises à disposition par l'émetteur ou l'annonceur. MetaversePost s'engage à fournir des rapports précis et impartiaux, mais les conditions du marché sont susceptibles de changer sans préavis.
A propos de l'auteur
Damir est chef d'équipe, chef de produit et rédacteur en chef chez Metaverse Post, couvrant des sujets tels que l'IA/ML, l'AGI, les LLM, le métaverse et Web3-domaines connexes. Ses articles attirent une audience massive de plus d'un million d'utilisateurs chaque mois. Il semble être un expert avec 10 ans d'expérience dans le référencement et le marketing numérique. Damir a été mentionné dans Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto et d'autres publications. Il voyage entre les Émirats arabes unis, la Turquie, la Russie et la CEI en tant que nomade numérique. Damir a obtenu un baccalauréat en physique, ce qui, selon lui, lui a donné les compétences de pensée critique nécessaires pour réussir dans le paysage en constante évolution d'Internet.
Plus d'articles
Damir est chef d'équipe, chef de produit et rédacteur en chef chez Metaverse Post, couvrant des sujets tels que l'IA/ML, l'AGI, les LLM, le métaverse et Web3-domaines connexes. Ses articles attirent une audience massive de plus d'un million d'utilisateurs chaque mois. Il semble être un expert avec 10 ans d'expérience dans le référencement et le marketing numérique. Damir a été mentionné dans Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto et d'autres publications. Il voyage entre les Émirats arabes unis, la Turquie, la Russie et la CEI en tant que nomade numérique. Damir a obtenu un baccalauréat en physique, ce qui, selon lui, lui a donné les compétences de pensée critique nécessaires pour réussir dans le paysage en constante évolution d'Internet.
