Isang Mas Malapit na Pagtingin sa Big-Name Developers ng Google sa Likod GPT-4 at Anong mga Startup ang Pinapatakbo Nila Ngayon
Sa madaling sabi
Ang mga tagalikha ng Transformer neural network architecture ay umalis sa Google upang ilunsad ang kanilang sariling mga negosyo, na nakalikom ng milyun-milyong dolyar at nagkakahalaga ng higit sa $1 bilyon.
Kung napanood mo ang seryeng "Silicon Valley" at hindi napalampas ang huling yugto, alalahanin kung paano natapos ang lahat: ang koponan ay nagsasama-sama pagkalipas ng dalawampung taon, na naaalala ang nakaraan.
Tingnan natin kung ano ang nangyari sa mga may-akda ng Transformer neural network architecture na pinagbabatayan ChatGPT at GPT-4. Ang koponan ay featured sa artikulong "Atensyon lang ang kailangan mo” ng Google Research (Hunyo 2017). Ang mga may-akda ay nakalista sa ibaba sa parehong pagkakasunud-sunod tulad ng sa artikulo ng Google.
Ashish Vaswani umalis sa Google sa katapusan ng 2021 upang magsimula Magaling, na nakalikom ng $415 milyon at nagkakahalaga ng higit sa $1 bilyon sa ngayon. Gayunpaman, umalis si Ashish sa Adept ilang buwan na ang nakalipas—noong Disyembre 2022, kaagad pagkatapos ilabas ang ChatGPT— at nagtatag ng bagong startup. Sa ngayon, ang startup ay wala pa ring pangalan, at hindi malinaw kung gaano karaming mga tao ang sumali sa kumpanya at kung ano ang kanilang ginagawa.
Bumalik sa Google, nagtrabaho si Vaswani sa disenyo ng modelo sa mga unang yugto at na-program ang buong bagay.
Noam Shazeer nagtrabaho sa Google nang mahigit 20 taon, mula noong Disyembre 2000. Noong Oktubre 2021, huminto siya at itinatag ang startup Tauhan.ai. Simula noon, nakataas na ang kumpanya ng $200 milyon at umabot sa halagang halos $1 bilyon. Ayon sa LinkedIn, mayroong humigit-kumulang 20 empleyado na nagtatrabaho doon, kaya ang halaga sa bawat dolyar ay kahanga-hanga. Si Noam ang nagpakilala ng ideya ng iba't ibang "ulo" sa mekanismo ng atensyon.
| Magbasa nang higit pa: Paano Magagamit ChatGPT (GPT-4) para sa Libre Magpakailanman |
Niki Parmar, ang nag-iisang babaeng co-author ng artikulo, ay isang staff researcher sa Google Brain team hanggang Nobyembre 2021. Pagkatapos, sumali siya kay Ashish Vaswani sa Adept. Gayunpaman, tulad ng alam na natin, hindi sila nagtagal doon at umalis nang magkasama upang magsimula ng isang bagong proyekto. Si Niki ay gumawa ng maraming pagsasanay at mga eksperimento sa pagpapatunay ng modelo.
Jakob Uszkoreit — marami ang tumatawag sa kanya na pangunahing utak sa likod ng pag-imbento ng arkitektura ng Transformer. Siya ang nagmungkahi na palitan ang mga paulit-ulit na network na may katulad na mekanismo ng "pansin" at nagsimulang mag-prototyping ng unang diskarte. Iniwan niya ang Google noong kalagitnaan ng 2021 at itinatag Inceptive Buhay, kung saan nagtatrabaho ang koponan sa pagmomodelo ng neural network ng mRNA. Ang mRNA ay kung ano (minsan) ang nagpapatibay sa mga bakuna (halimbawa, ang bakunang Covid-19 ng Pfizer-BioNTech).
Lion Jones ay ang tanging tao sa listahang ito na nagtatrabaho sa Google hanggang sa araw na ito. Ayon sa kanya, siya ang nagmungkahi ng pamagat ng artikulo, na naging meme at nagbunga ng dose-dosenang iba pang artikulo na may pattern na "X ang kailangan mo". Responsable din siya sa pag-optimize ng inference ng modelo at visualization para sa mga eksperimento at artikulo.
| Magbasa nang higit pa: Pinakamahusay na AI Content Detection Tools noong 2023 |
Aidan Gomez iniwan ang Google noong taglagas ng 2019 upang matagpuan Cohere.ai. Ang kumpanya ay patuloy na nagtatrabaho sa mga modelo ng wika; ang ilan sa kanilang mga produkto ay katulad ng mga kaso ng paggamit na mayroon ang mga tao sa mga unang araw pagkatapos ng paglabas ng ChatGPT. Pinamamahalaang upang makaakit ng higit sa $400 milyon sa mga pamumuhunan at palaguin ang kumpanya sa halos 200 empleyado.
Lukasz Kaiser, pagkatapos ng mahigit pitong taon sa Google, umalis sa tag-araw ng 2021 upang magtrabaho sa OpenAI. Ang orihinal na artikulo ay nagsasaad na si Lukasz ang may pananagutan sa pagbuo at pag-optimize ng code. Isa siya sa mga co-authors ng TensorFlow, isang library para sa paglikha at pagsasanay ng mga neural network. Siya ay isang napakalakas na inhinyero—at ngayon ay nagtatrabaho na GPT 👀 Bilang bahagi ng gawain sa Transformer, nakipagtulungan siya kay Aidan Gomez upang pahusayin ang codebase at pabilisin ang mga pag-ulit sa gawaing pananaliksik (sa pamamagitan ng mas madaling pakikipag-ugnayan at prototyping).
Illia Polosukhin umalis sa Google noong 2017, bago ang paglabas ng artikulo, upang mahanap Malapit, isang blockchain protocol na mahalagang katunggali sa Ethereum. Ang kasalukuyang pagpapahalaga nito ay humigit-kumulang $2 bilyon, at sa loob lamang ng anim na taon, higit sa $375 milyon ang naitaas bilang mga pamumuhunan.
Magbasa pa tungkol sa AI:
Pagtanggi sa pananagutan
Sa linya na may Mga alituntunin ng Trust Project, pakitandaan na ang impormasyong ibinigay sa pahinang ito ay hindi nilayon at hindi dapat bigyang-kahulugan bilang legal, buwis, pamumuhunan, pananalapi, o anumang iba pang paraan ng payo. Mahalagang mamuhunan lamang kung ano ang maaari mong mawala at humingi ng independiyenteng payo sa pananalapi kung mayroon kang anumang mga pagdududa. Para sa karagdagang impormasyon, iminumungkahi naming sumangguni sa mga tuntunin at kundisyon pati na rin sa mga pahina ng tulong at suporta na ibinigay ng nagbigay o advertiser. MetaversePost ay nakatuon sa tumpak, walang pinapanigan na pag-uulat, ngunit ang mga kondisyon ng merkado ay maaaring magbago nang walang abiso.
Tungkol sa Ang May-akda
Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet.
Mas marami pang artikulo
Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet.
