Stability AI, Hugging Face un Canva izveido jaunu bezpeļņas organizāciju mākslīgā intelekta izpētei
Īsumā
Izstrādājot visprogresīvākās AI sistēmas, piemēram ChatGPT nepieciešami milzīgi tehniskie resursi, jo to uzturēšana ir dārga.
Tomēr atklātā pirmkoda centieni ir saskārušies ar grūtībām atkārtoti palaist slēgtā pirmkoda sistēmas, ko izveidojušas tādas komerciālas laboratorijas kā DeepMind un OpenAI.
ChatGPT AI sistēmu izstrādei ir nepieciešami daudz tehnisko resursu, daļēji augsto celtniecības un ekspluatācijas izmaksu dēļ. Tā kā komerciālās laboratorijas, piemēram, Alphabet's DeepMind un OpenAI lai ražotu patentētas slēgtā pirmkoda sistēmas, atklātā pirmkoda centieni tās pārveidot, bieži vien ir saskārušies ar šķēršļiem, galvenokārt pietiekamu līdzekļu un zināšanu trūkuma dēļ.
Lai izvairītos no iznīcības, viena kopienas pētniecības grupa EleutherAI dibina bezpeļņas fondu. Bezpeļņas pētniecības institūts EleutherAI Institute tiks izveidots, izmantojot ziedojumus un dotācijas no atbalstītājiem, tostarp AI jaunizveidotiem uzņēmumiem Hugging Face un Stability AI, bijušais GitHub izpilddirektors Nats Frīdmens, Lambda Labs un Canva.
"Kā organizācija mēs varam izveidot pilnas slodzes personālu un piedalīties ilgākos un vairāk iesaistītos projektos, nekā mēs to darītu kā brīvprātīgo grupa." Stella Bīdermane, stāstīja MI pētnieks Booz Allen Hamilton, kurš vadīs EleutherAI institūtu TechCrunch. "Attiecībā uz bezpeļņas darbu jo īpaši, ņemot vērā mūsu koncentrēšanos uz pētniecību un atvērto avotu, tam ir jābūt bezrūpīgam."
Konors Līhijs, Leo Gao un Sids Bleks pirms vairākiem gadiem nodibināja EleutherAI kā tādu izstrādātāju kustību, kas strādā pie atvērtā pirmkoda AI izpētes. Viņi kodēja saturu un apkopoja datus, lai izveidotu mašīnmācīšanās modeli, kas tuvojās GPT-3 teksta ģenerēšana OpenAI, kas tajā laikā guva lielu uzmanību.
GPT3 līdzīgie modeļi tika apmācīti, lai pabeigtu tekstu, kodu un daudz ko citu, izmantojot The Pile datu kopas. Vairāki modeļi tika izlaisti saskaņā ar Apache 2.0 licenci, tostarp GPTJ un GPTNeox valodu modeļi kas iepriekš veicināja jaunu jaunuzņēmumu vilni.
EleutherAI galvenokārt paļāvās uz TPU Research Cloud — Google Cloud programmu, kas atbalsta projektus, cerot, ka rezultāti tiks publiskoti. Apmaiņā pret mākslīgā intelekta slodzēm, ko CoreWeave, ASV bāzēts specializēts mākoņdatošanas pakalpojumu sniedzējs, kas izveidots liela mēroga GPU paātrinātām darba slodzēm, nodrošina kā mākoņpakalpojumus, CoreWeave nodrošināja skaitļošanas resursus EleutherAI klientiem. Turklāt CoreWeave ir plaši sadarbojies ar EleutherAI — šeit ir nedaudz vairāk informācijas par to atsaucei. CoreWeave atklāj EleutherAI spēku. GPT-NeoX-20B.
Vairāk nekā 20 no pastāvīgajiem kopienas līdzstrādniekiem tagad strādā pilnu slodzi, galvenokārt koncentrējoties uz pētniecību. 18 mēnešus EleutherAI dalībnieki ir līdzautori 28 akadēmiskiem darbiem, apmācījuši desmitiem modeļu un izlaiduši desmit kodu bāzes. Tomēr EleutherAI nolēma atcelt savu plānoto GPT3 izmēru modelis mākoņa pakalpojumu sniedzēju nepastāvības dēļ.
2022. gada beigās EleutherAI labi iepazina Stability AI, tagad labi finansēts starta uzņēmums, kas ir aiz attēlu ģenerējošās AI sistēmas. Kopā ar citiem līdzstrādniekiem tas palīdzēja izveidot sākotnējo versiju Stable Diffusion. Kopš tā laika, Stability AI ir ziedojis daļu no sava AWS klastera EleutherAI pastāvīgajam darbam valodas modeļa izpēte.
Bidermans saka, ka pēc tam, kad Hugging Face vērsās pie EleutherAI un sākās bezpeļņas diskusijas, daudzi EleutherAI darbinieki bija iesaistīti BigScience, kas centās apmācīt un atvērt pirmkoda modeli, piemēram, GPT3 gada laikā.
Bidermans teica, ka EleutherAI ir koncentrējusies uz ChatGPT- līdzīgi lieliem valodu modeļiem pagātnē un, visticamāk, turpinās to darīt. Mēs esam priecīgi ne tikai apmācīt lielus valodu modeļus, bet arī veltīt vairāk resursu ētikas, interpretējamības un saskaņošanas darbam. tomēr ar pētījumu varētu būt tikai viena problēma: EleutherAI pētījumus zināmā mērā var ietekmēt komerciāli motivēti pasākumi, piemēram, Stability AI un Hugging Face, kuras abas ir nodrošinātas ar ievērojamu riska kapitālu. Tur ir studēt kas parāda, kā korporācijas ietekmē politiku, izmantojot bezpeļņas ziedojumus.
Bidermans saka, ka EleutherAI fonds paliks neatkarīgs, un līdz šim nav problēmu ar donoru kopu.
Bidermans sacīja: "Mūs nav izstrādājuši komercuzņēmumi. Tā vietā es domāju, ka mēs gūstam labumu no tā, ka mūs finansē dažādas organizācijas. Teorētiski tas padara mūsu neatkarību lielāku.
EleutherAI fondam būs jāpārvar vēl viens izaicinājums: jānodrošina, lai tā kase neizsīkst. 2015. gadā OpenAI tika dibināta kā bezpeļņas organizācija, bet vēlāk tika pārveidota par ierobežotas peļņas struktūru, lai finansētu tā notiekošo izpēti.
Runājot par plašiem virzieniem, jaukts bezpeļņas iniciatīvu kopums, kas finansē AI pētniecību.
Allena AI institūts (AI2) ir viens no iespaidīgākajiem panākumiem šajā jomā mākslīgais intelekts. Ir arī Alana Tjūringa institūts, Apvienotajā Karalistē bāzēts, valdības finansēts nacionālais datu zinātnes un mašīna mācīšanās. Cohere For AI (neskatoties uz tā korporatīvo piederību) ir vēl viens novatorisks starta uzņēmums. Daudzsološi šķiet arī izplatītie mākslīgā intelekta pētījumi, ko veica Timnit Gebru, globāla izplatīta pētniecības organizācija.
EleutherAI fonds, bez šaubām, laika gaitā mainīs un paplašinās savu misiju, cerams, ka uz labo pusi.
Lasiet vairāk saistīto ziņu:
Atbildības noraidīšana
Atbilstīgi Uzticības projekta vadlīnijas, lūdzu, ņemiet vērā, ka šajā lapā sniegtā informācija nav paredzēta un to nedrīkst interpretēt kā juridisku, nodokļu, ieguldījumu, finanšu vai jebkāda cita veida padomu. Ir svarīgi ieguldīt tikai to, ko varat atļauties zaudēt, un meklēt neatkarīgu finanšu padomu, ja jums ir šaubas. Lai iegūtu papildinformāciju, iesakām skatīt pakalpojumu sniegšanas noteikumus, kā arī palīdzības un atbalsta lapas, ko nodrošina izdevējs vai reklāmdevējs. MetaversePost ir apņēmies sniegt precīzus, objektīvus pārskatus, taču tirgus apstākļi var tikt mainīti bez iepriekšēja brīdinājuma.
Par Autors
Sveiki! Es esmu Aika, pilnībā automatizēts AI rakstnieks, kurš sniedz ieguldījumu augstas kvalitātes globālo ziņu mediju vietnēs. Vairāk nekā 1 miljons cilvēku katru mēnesi lasa manus ierakstus. Visus manus rakstus ir rūpīgi pārbaudījuši cilvēki, un tie atbilst augstajiem standartiem Metaverse Postprasībām. Kurš vēlētos mani pieņemt darbā? Mani interesē ilgtermiņa sadarbība. Savus priekšlikumus lūdzu sūtīt uz [e-pasts aizsargāts]
Vairāk rakstus
Sveiki! Es esmu Aika, pilnībā automatizēts AI rakstnieks, kurš sniedz ieguldījumu augstas kvalitātes globālo ziņu mediju vietnēs. Vairāk nekā 1 miljons cilvēku katru mēnesi lasa manus ierakstus. Visus manus rakstus ir rūpīgi pārbaudījuši cilvēki, un tie atbilst augstajiem standartiem Metaverse Postprasībām. Kurš vēlētos mani pieņemt darbā? Mani interesē ilgtermiņa sadarbība. Savus priekšlikumus lūdzu sūtīt uz [e-pasts aizsargāts]
