Una mirada més propera als desenvolupadors de grans noms de Google darrere GPT-4 i quines startups dirigeixen avui
En breu
Els creadors de l'arquitectura de xarxa neuronal Transformer van deixar Google per llançar els seus propis negocis, que han recaptat milions de dòlars i estan valorats en més de mil milions de dòlars.
Si heu vist la sèrie "Silicon Valley" i no us heu perdut l'últim episodi, recordeu com va acabar tot: l'equip es reuneix vint anys després, recordant el passat.
Vegem què va passar amb els autors de l'arquitectura de xarxa neuronal Transformer que hi ha a la base ChatGPT i GPT-4. L'equip era featured a l'article "L'atenció és tot el que necessites” de Google Research (juny de 2017). Els autors es mostren a continuació en el mateix ordre que a l'article de Google.
Ashish Vaswani va deixar Google a finals de 2021 per començar Adeptes, que ha recaptat 415 milions de dòlars i està valorat en més de mil milions de dòlars fins ara. Tanmateix, Ashish va deixar Adept fa uns mesos, el desembre de 1, immediatament després de l'alliberament de ChatGPT— i va fundar una nova startup. De moment, la startup encara no té nom, i no està clar quantes persones s'han incorporat a l'empresa i en què estan treballant.
De tornada a Google, Vaswani va treballar en el disseny del model en les primeres etapes i ho va programar tot.
Noam Shazeer Va treballar a Google durant més de 20 anys, des del desembre de 2000. L'octubre de 2021, va deixar i va fundar la startup Personatge.ai. Des de llavors, la companyia ja ha recaptat 200 milions de dòlars i ha arribat a una valoració de gairebé 1 milions de dòlars. Segons LinkedIn, hi treballen uns 20 empleats, de manera que el valor per dòlar és impressionant. Va ser Noam qui va introduir la idea de diferents "caps" en el mecanisme d'atenció.
Niki Parmar, l'única dona coautora de l'article, va ser investigadora del personal de l'equip de Google Brain fins al novembre de 2021. Després, es va unir a Ashish Vaswani a Adept. Tanmateix, com ja sabem, no s'hi van quedar molt de temps i van marxar junts per iniciar un nou projecte. Niki ha fet molts experiments d'entrenament i validació de models.
Jakob Uszkoreit - molts l'anomenen el cervell principal darrere de la invenció de l'arquitectura Transformer. Va ser ell qui va suggerir substituir les xarxes recurrents per un mecanisme d'"atenció" similar i va començar a prototipar el primer enfocament. Va deixar Google a mitjans del 2021 i va fundar Vida Inceptiva, on l'equip treballa en el modelatge de xarxes neuronals d'ARNm. L'ARNm és el que (de vegades) sustenta les vacunes (per exemple, la vacuna Covid-19 de Pfizer-BioNTech).
Llion Jones és l'única persona d'aquesta llista que treballa a Google fins avui. Segons ell, va ser ell qui va suggerir el títol de l'article, que es va convertir en un meme i va donar lloc a desenes d'altres articles amb el patró “X és tot el que necessites”. També va ser responsable d'optimitzar la inferència i la visualització de models per a experiments i articles.
Aidan Gómez va deixar Google a la tardor del 2019 per fundar Cohere.ai. L'empresa continua treballant en models lingüístics; alguns dels seus productes són similars als casos d'ús que la gent va tenir en els primers dies després del llançament de ChatGPT. Va aconseguir atraure més de 400 milions de dòlars en inversions i fer créixer l'empresa fins a gairebé 200 empleats.
Lukasz Kaiser, després de més de set anys a Google, va marxar l'estiu del 2021 per treballar-hi OpenAI. L'article original afirma que Lukasz va ser responsable del desenvolupament i l'optimització del codi. És un dels coautors de TensorFlow, una biblioteca per crear i entrenar xarxes neuronals. És un enginyer molt fort, i ara hi està treballant GPT 👀 Com a part del treball a Transformer, va treballar amb Aidan Gomez per millorar la base de codi i accelerar les iteracions en el treball de recerca (a través d'una interacció i prototipatge més fàcils).
Illia Polosukhin va deixar Google el 2017, abans de la publicació de l'article, per fundar Prop, un protocol de cadena de blocs que és essencialment un competidor d'Ethereum. La seva valoració actual és d'uns 2 milions de dòlars i, en només sis anys, s'han recaptat més de 375 milions de dòlars com a inversions.
Llegeix més sobre AI:
renúncia
En línia amb la Directrius del projecte Trust, si us plau, tingueu en compte que la informació proporcionada en aquesta pàgina no pretén ni s'ha d'interpretar com a assessorament legal, fiscal, d'inversió, financer o de cap altra forma. És important invertir només el que et pots permetre perdre i buscar assessorament financer independent si tens dubtes. Per obtenir més informació, us suggerim que feu referència als termes i condicions, així com a les pàgines d'ajuda i assistència proporcionades per l'emissor o l'anunciant. MetaversePost es compromet a fer informes precisos i imparcials, però les condicions del mercat estan subjectes a canvis sense previ avís.
About The Autor
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
més articlesDamir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.