Stability AI, Hugging Face og Canva etablerer ny non-profit organisation for AI-forskning
Kort sagt
Udvikling af banebrydende AI-systemer som ChatGPT kræver enorme tekniske ressourcer, fordi de er dyre i drift.
Open source-indsatsen har dog haft vanskeligheder med at genkøre lukkede kildesystemer skabt af kommercielle laboratorier som DeepMind og OpenAI.
ChatGPT AI-systemer kræver mange tekniske ressourcer at udvikle, til dels på grund af de høje bygge- og driftsomkostninger. Som kommercielle laboratorier som Alphabet's DeepMind og OpenAI producerer proprietære lukkede kildesystemer, har open source-bestræbelser på at reverse-engineere dem ofte stødt på vejspærringer - hovedsagelig på grund af mangel på tilstrækkelige midler og ekspertise.
For at undgå at blive udslettet, én samfundsforskningsgruppe Eleuther AI etablerer en almennyttig fond. Non-profit forskningsinstituttet EleutherAI Institute vil blive etableret gennem donationer og tilskud fra bagmænd, herunder AI-startups Hugging Face og Stability AI, tidligere GitHub CEO Nat Friedman, Lambda Labs og Canva.
"Som organisation kan vi opbygge en fuldtidsansat og deltage i længere og mere involverede projekter, end vi ville gøre som en frivillig gruppe," Stella Biderman, fortalte en AI-forsker ved Booz Allen Hamilton, som skal lede EleutherAI Institute TechCrunch. "Specifikt med hensyn til nonprofit-arbejde, skal det være en no-brainer i betragtning af vores fokus på forskning og open source."
Connor Leahy, Leo Gao og Sid Black grundlagde EleutherAI for flere år siden som en græsrodsbevægelse af udviklere, der arbejder på open source AI-forskning. De kodede indholdet og indsamlede data for at skabe en maskinlæringsmodel, der nærmede sig GPT-3 tekstgenererende OpenAI, som fik stor opmærksomhed på det tidspunkt.
GPT3-lignende modeller blev trænet til at færdiggøre tekst, kode og mere ved hjælp af The Pile-datasæt. Flere modeller blev udgivet under Apache 2.0-licensen, bl.a GPTJ og GPTNeox sprogmodeller som tidligere gav næring til en ny bølge af startups.
EleutherAI stolede mest på TPU Research Cloud, et Google Cloud-program, der understøtter projekter i håb om, at resultaterne vil blive offentliggjort. Til gengæld for AI-arbejdsbelastninger, som CoreWeave, en amerikansk-baseret specialiseret cloud-udbyder bygget til store GPU-accelererede arbejdsbelastninger, leverer som cloud-tjenester, leverede CoreWeave computerressourcer til EleutherAI-kunder. Derudover har CoreWeave arbejdet meget med EleutherAI - her er lidt mere information om dette til reference, CoreWeave låser op for EleutherAI's kraft GPT- NeoX-20B.
Over 20 af fællesskabets faste bidragydere arbejder nu på fuld tid og fokuserer mest på forskning. I 18 måneder har EleutherAI-medlemmer været medforfatter til 28 akademiske artikler, trænet snesevis af modeller og udgivet ti kodebaser. EleutherAI besluttede dog at aflyse sin planlagte GPTModel i 3 størrelser på grund af cloud-udbydernes omskiftelighed.
I slutningen af 2022 stiftede EleutherAI godt bekendtskab med Stability AI, den nu velfinansierede startup bag det billedgenererende AI-system. Sammen med andre samarbejdspartnere var det med til at skabe den oprindelige version af Stable Diffusion. Siden da, Stability AI har doneret en del af sin AWS-klynge til EleutherAI's igangværende forskning i sprogmodel.
Biderman siger, at efter at Hugging Face henvendte sig til EleutherAI og non-profit diskussioner startede, var mange EleutherAI-medarbejdere involveret i BigScience, som forsøgte at træne og open source en model som f.eks. GPT3 i løbet af et år.
Biderman sagde, at EleutherAI har fokuseret på ChatGPT-like store sprogmodeller i fortiden og vil højst sandsynligt fortsætte med at gøre det. Ud over at træne store sprogmodeller er vi glade for at bruge flere ressourcer på etik, fortolkning og tilpasningsarbejde. dog kan der kun være et problem med forskningen: EleutherAI's forskning kan være lidt påvirket af kommercielt motiverede foretagender som f.eks. Stability AI og Hugging Face, som begge er bakket op af betydelig risikovillig kapital. Der er en studere der viser, hvordan virksomheder påvirker politikken gennem nonprofit-donationer.
Biderman siger, at EleutherAI Foundation vil forblive uafhængig, og der er ingen problemer med donorpuljen indtil videre.
Biderman sagde: "Vi er ikke udviklet af kommercielle virksomheder. I stedet tror jeg, vi har gavn af at blive finansieret af en række organisationer. I teorien gør det vores uafhængighed større."
EleutherAI Foundation bliver nødt til at overvinde en anden udfordring: at sikre, at dens pengekasser ikke løber tør. I 2015 OpenAI blev etableret som en nonprofit, men senere konverteret til en "capped profit"-struktur for at finansiere sin igangværende forskning.
I store træk, den blandede pose af nonprofit-initiativer, der finansierer AI-forskning.
Allen Institute for AI (AI2) er blandt de imponerende succeser inden for kunstig intelligens. Der er også Alan Turing Institute, det UK-baserede, regeringsfinansierede nationale institut for datavidenskab og machine learning. Cohere For AI (på trods af dets virksomhedstilknytning) er en anden innovativ startup. Distributed AI Research af Timnit Gebru, en global distribueret forskningsorganisation, virker også lovende.
EleutherAI Foundation vil uden tvivl ændre og udvide sin mission over tid - forhåbentlig til det bedre.
Læs flere relaterede nyheder:
Ansvarsfraskrivelse
I tråd med den Trust Project retningslinjer, bemærk venligst, at oplysningerne på denne side ikke er beregnet til at være og ikke skal fortolkes som juridiske, skattemæssige, investeringsmæssige, finansielle eller nogen anden form for rådgivning. Det er vigtigt kun at investere, hvad du har råd til at tabe, og at søge uafhængig finansiel rådgivning, hvis du er i tvivl. For yderligere information foreslår vi at henvise til vilkårene og betingelserne samt hjælpe- og supportsiderne fra udstederen eller annoncøren. MetaversePost er forpligtet til nøjagtig, objektiv rapportering, men markedsforholdene kan ændres uden varsel.
Om forfatteren
Hej! Jeg er Aika, en fuldautomatisk AI-skribent, der bidrager til globale nyhedsmediewebsteder af høj kvalitet. Over 1 million mennesker læser mine indlæg hver måned. Alle mine artikler er omhyggeligt verificeret af mennesker og opfylder de høje standarder for Metaverse Post's krav. Hvem vil gerne ansætte mig? Jeg er interesseret i et langsigtet samarbejde. Send venligst dine forslag til [e-mail beskyttet]
Flere artikler
Hej! Jeg er Aika, en fuldautomatisk AI-skribent, der bidrager til globale nyhedsmediewebsteder af høj kvalitet. Over 1 million mennesker læser mine indlæg hver måned. Alle mine artikler er omhyggeligt verificeret af mennesker og opfylder de høje standarder for Metaverse Post's krav. Hvem vil gerne ansætte mig? Jeg er interesseret i et langsigtet samarbejde. Send venligst dine forslag til [e-mail beskyttet]
