Tarkempi katsaus Googlen nimekkäisiin kehittäjiin GPT-4 ja mitä startupeja he pyörittävät tänään
Lyhyesti
Transformer-hermoverkkoarkkitehtuurin luojat jättivät Googlen perustamaan omia yrityksiään, jotka ovat keränneet miljoonia dollareita ja joiden arvo on yli miljardi dollaria.
Jos katsoit sarjaa "Piilaakso" etkä missannut viimeistä jaksoa, muista, miten se kaikki päättyi: joukkue kokoontuu kaksikymmentä vuotta myöhemmin muistelemaan menneisyyttä.
Katsotaanpa, mitä tapahtui taustalla olevan Transformer-hermoverkkoarkkitehtuurin tekijöille ChatGPT ja GPT-4. Joukkue oli featured artikkelissa "Huomio on kaikki mitä tarvitsetGoogle Research (kesäkuu 2017). Kirjoittajat on lueteltu alla samassa järjestyksessä kuin Googlen artikkelissa.
Ashish Vaswani lähti Googlesta vuoden 2021 lopussa aloittaakseen mestari, joka on kerännyt 415 miljoonaa dollaria ja sen arvo on tähän mennessä yli miljardi dollaria. Ashish jätti Adeptin kuitenkin muutama kuukausi sitten – joulukuussa 1, heti julkaisun jälkeen ChatGPT– ja perusti uuden startup-yrityksen. Tällä hetkellä startup on vielä nimetön, eikä ole selvää, kuinka monta henkilöä yritykseen on liittynyt ja mitä he tekevät.
Palattuaan Googlelle Vaswani työskenteli mallin suunnittelun parissa alkuvaiheessa ja ohjelmoi koko asian.
Noam Shazeer työskenteli Googlella yli 20 vuotta joulukuusta 2000 lähtien. Lokakuussa 2021 hän erosi ja perusti startupin character.ai. Sen jälkeen yritys on kerännyt jo 200 miljoonaa dollaria ja saavuttanut lähes miljardin dollarin arvon. LinkedInin mukaan siellä työskentelee noin 1 työntekijää, joten dollarin arvo on vaikuttava. Noam esitteli ajatuksen erilaisista "päistä" huomiomekanismiin.
Niki Parmar, artikkelin ainoa naispuolinen kirjoittaja, työskenteli Google Brain -tiimin henkilökunnan tutkijana marraskuuhun 2021 asti. Sitten hän liittyi Ashish Vaswaniin Adeptille. Kuten jo tiedämme, he eivät kuitenkaan viipyneet siellä pitkään ja lähtivät yhdessä aloittamaan uuden projektin. Niki on tehnyt monia koulutus- ja mallivalidointikokeita.
Jakob Uszkoreit - Monet kutsuvat häntä Transformer-arkkitehtuurin keksimisen pääaivoiksi. Hän ehdotti toistuvien verkkojen korvaamista samanlaisella "huomio"-mekanismilla ja aloitti ensimmäisen lähestymistavan prototyypin. Hän jätti Googlen vuoden 2021 puolivälissä ja perusti Inceptive Life, jossa tiimi työskentelee mRNA:n hermoverkkomallinnuksen parissa. mRNA on se, mikä (joskus) tukee rokotteita (esimerkiksi Pfizer-BioNTechin Covid-19-rokote).
Llion Jones on ainoa henkilö tällä listalla, joka työskentelee Googlella tähän päivään asti. Hänen mukaansa hän ehdotti artikkelin otsikkoa, josta tuli meemi ja joka synnytti kymmeniä muita "X on kaikki mitä tarvitset" -mallin artikkeleita. Hän vastasi myös mallipäätelmien ja visualisoinnin optimoinnista kokeiden ja artikkelien osalta.
Aidan Gomez lähti Googlesta syksyllä 2019 löydettiin Cohere.ai. Yritys jatkaa työskentelyä kielimallien parissa; jotkut heidän tuotteistaan ovat samanlaisia kuin käyttötapaukset, joita ihmisillä oli alkuaikoina julkaisun jälkeen ChatGPT. Onnistui houkuttelemaan yli 400 miljoonan dollarin investointeja ja kasvattamaan yritystä lähes 200 työntekijäksi.
Lukasz Kaiser, yli seitsemän vuoden Googlessa, lähti kesällä 2021 töihin OpenAI. Alkuperäisessä artikkelissa todetaan, että Lukasz vastasi koodin kehittämisestä ja optimoinnista. Hän on yksi neuroverkkojen luomiseen ja kouluttamiseen tarkoitetun kirjaston TensorFlow'n tekijöistä. Hän on erittäin vahva insinööri – ja työskentelee nyt GPT 👀 Osana Transformer-työtä hän työskenteli Aidan Gomezin kanssa parantaakseen koodikantaa ja nopeuttaakseen iteraatioita tutkimustyössä (helpen vuorovaikutuksen ja prototyyppien avulla).
Illia Polosukhin lähti Googlesta vuonna 2017, ennen artikkelin julkaisua, löytyi Lähellä, lohkoketjuprotokolla, joka on olennaisesti Ethereumin kilpailija. Sen nykyinen arvo on noin 2 miljardia dollaria, ja vain kuudessa vuodessa sijoituksina on kerätty yli 375 miljoonaa dollaria.
Lue lisää tekoälystä:
Vastuun kieltäminen
Mukaisesti Luottamusprojektin ohjeetHuomaa, että tällä sivulla annettuja tietoja ei ole tarkoitettu eikä niitä tule tulkita oikeudellisiksi, verotukselliseksi, sijoitus-, rahoitus- tai minkään muun muodon neuvoiksi. On tärkeää sijoittaa vain sen verran, mitä sinulla on varaa menettää, ja pyytää riippumatonta talousneuvontaa, jos sinulla on epäilyksiä. Lisätietoja saat käyttöehdoista sekä myöntäjän tai mainostajan tarjoamista ohje- ja tukisivuista. MetaversePost on sitoutunut tarkkaan, puolueettomaan raportointiin, mutta markkinaolosuhteet voivat muuttua ilman erillistä ilmoitusta.
Author
Damir on tiimin johtaja, tuotepäällikkö ja toimittaja osoitteessa Metaverse Post, kattaa aiheita, kuten AI/ML, AGI, LLMs, Metaverse ja Web3- liittyvät kentät. Hänen artikkelinsa houkuttelevat yli miljoonan käyttäjän massiivisen yleisön joka kuukausi. Hän näyttää olevan asiantuntija, jolla on 10 vuoden kokemus hakukoneoptimoinnista ja digitaalisesta markkinoinnista. Damir on mainittu Mashablessa, Wiredissä, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muut julkaisut. Hän matkustaa Arabiemiirikuntien, Turkin, Venäjän ja IVY-maiden välillä digitaalisena nomadina. Damir suoritti kandidaatin tutkinnon fysiikasta, jonka hän uskoo antaneen hänelle kriittisen ajattelun taidot menestyäkseen jatkuvasti muuttuvassa internetin maisemassa.
lisää artikkeleitaDamir on tiimin johtaja, tuotepäällikkö ja toimittaja osoitteessa Metaverse Post, kattaa aiheita, kuten AI/ML, AGI, LLMs, Metaverse ja Web3- liittyvät kentät. Hänen artikkelinsa houkuttelevat yli miljoonan käyttäjän massiivisen yleisön joka kuukausi. Hän näyttää olevan asiantuntija, jolla on 10 vuoden kokemus hakukoneoptimoinnista ja digitaalisesta markkinoinnista. Damir on mainittu Mashablessa, Wiredissä, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ja muut julkaisut. Hän matkustaa Arabiemiirikuntien, Turkin, Venäjän ja IVY-maiden välillä digitaalisena nomadina. Damir suoritti kandidaatin tutkinnon fysiikasta, jonka hän uskoo antaneen hänelle kriittisen ajattelun taidot menestyäkseen jatkuvasti muuttuvassa internetin maisemassa.