Ang Leak na Google Document ay Nagpapakita ng Mga Hamon sa Pagpapanatili ng Competitive Edge sa AI
Sa madaling sabi
Ang isang leaked na dokumento mula sa isang empleyado ng Google (Luke Sernau) ay nagmumungkahi na ang mga modelo ng open-source na wika ay mabilis na nahihigitan ang mga pagsulong ng Google.
Itinatampok ng dokumento ang kahalagahan ng pagpapagana ng mga pagsasama ng third-party at pakikipagtulungan sa mga panlabas na pagsisikap sa halip na ituloy ang malalaking modelo ng wika.
Ang mga pagtatangka ng Google na pangalagaan ang mga teknolohikal na bentahe nito mula sa mga katunggali gaya ng OpenAI ay mapaghamong.
Isang hindi kilalang indibidwal ang nagbahagi ng isang leaked na dokumento sa isang pampublikong server ng Discord mula sa isang mananaliksik sa loob ng Google, kinumpirma ng SemiAnalysis. Ang dokumento highlights na bagaman OpenAI at ang Google ay nasa isang karera upang bumuo ng mga pinaka-advanced na modelo ng wika, ang kanilang pag-unlad ay mabilis na natatabunan ng mga pagsulong na ginawa sa open-source na komunidad.
Ang dokumento ay naglalaman ng mga personal na opinyon ng isang empleyado ng Google at hindi kumakatawan sa mga pananaw ng kumpanya sa kabuuan. Ayon kay Bloomberg, ibinahagi ni Luke Sernau, ang senior software engineer sa Google, ang dokumento sa isang panloob na platform sa loob ng kumpanya mga isang buwan na ang nakalipas.
"Habang ang aming mga modelo ay may bahagyang kalamangan sa mga tuntunin ng kalidad, ang agwat ay mabilis na nagsasara. Ang mga open-source na modelo ay mas mabilis, mas nako-customize, mas pribado, at mas may kakayahang pound-for-pound. Gumagawa sila ng mga bagay na may $100 at 13B na param na nahihirapan tayo sa $10M at 540B. At ginagawa nila ito sa mga linggo, hindi buwan,"
binasa ang dokumento.
Ang diskarte ng kumpanya sa mga modelo ng wika ay pinag-uusapan. Isinulat ni Sernau na ang Google ay walang "lihim na sarsa" at sa halip ay dapat tumingin upang matuto mula sa at makipagtulungan sa mga panlabas na pagsisikap. Binigyang-diin ng dokumento ang kahalagahan ng pagpapagana ng mga pagsasama ng third-party at kinikilala na ang mga tao ay malamang na hindi magbayad para sa isang pinaghihigpitang modelo kapag mayroon nang mga libreng alternatibo na may maihahambing na kalidad. Nagtalo din si Sernau na ang pagtugis ng higante mga modelo ng wika ay humahadlang sa pag-unlad at iminungkahi na ang mas maliliit na variant ay dapat makatanggap ng higit na pansin. Napagpasyahan ng dokumento na ang pinakamahusay na mga modelo, sa katagalan, ay ang mga maaaring mabilis na maulit.
Ang chart, na kinabibilangan ng mga label na "2 weeks apart" at "1 week apart", ay hinango mula sa isang chart sa anunsyo ng Vicuna 13-B. Binago ng may-akda ang orihinal na tsart upang ilarawan ang mabilis na pag-unlad ng LLaMA Vicuna at Alpaca kasunod ng LLaMA -develop.
Ang mga pagtatangka ng Google na pangalagaan ang mga teknolohikal na bentahe nito mula sa mga kakumpitensya tulad ng OpenAI napatunayang mapanghamon. Bukod dito, sa lumalagong pakikipagtulungan sa loob ng komunidad ng pananaliksik, ang pagpapanatili ng isang mapagkumpitensyang gilid ay naging mas mahirap. Sa abot-kayang access sa makabagong pananaliksik sa mga LLM, ang mga institusyon sa buong mundo ay nagsasagawa ng mga pag-aaral na higit pa sa kakayahan ng Google. Iminumungkahi ni Sernau na ang Google ay maaaring kumapit sa mga lihim nito habang ang panlabas na pagbabago ay nagpapalabnaw sa halaga nito o tumingin upang matuto mula sa iba sa komunidad ng pananaliksik.
Magbasa nang higit pa:
Pagtanggi sa pananagutan
Sa linya na may Mga alituntunin ng Trust Project, pakitandaan na ang impormasyong ibinigay sa pahinang ito ay hindi nilayon at hindi dapat bigyang-kahulugan bilang legal, buwis, pamumuhunan, pananalapi, o anumang iba pang paraan ng payo. Mahalagang mamuhunan lamang kung ano ang maaari mong mawala at humingi ng independiyenteng payo sa pananalapi kung mayroon kang anumang mga pagdududa. Para sa karagdagang impormasyon, iminumungkahi naming sumangguni sa mga tuntunin at kundisyon pati na rin sa mga pahina ng tulong at suporta na ibinigay ng nagbigay o advertiser. MetaversePost ay nakatuon sa tumpak, walang pinapanigan na pag-uulat, ngunit ang mga kondisyon ng merkado ay maaaring magbago nang walang abiso.
Tungkol sa Ang May-akda
Si Agne ay isang mamamahayag na sumasaklaw sa pinakabagong mga uso at pag-unlad sa metaverse, AI, at Web3 mga industriya para sa Metaverse Post. Ang kanyang hilig sa pagkukuwento ay nagbunsod sa kanya na magsagawa ng maraming panayam sa mga eksperto sa mga larangang ito, na laging naghahangad na tumuklas ng mga kapana-panabik at nakakaakit na mga kuwento. Si Agne ay mayroong Bachelor's degree sa panitikan at may malawak na background sa pagsulat tungkol sa malawak na hanay ng mga paksa kabilang ang paglalakbay, sining, at kultura. Nagboluntaryo din siya bilang isang editor para sa organisasyon ng mga karapatang panghayop, kung saan tumulong siya na itaas ang kamalayan tungkol sa mga isyu sa kapakanan ng hayop. Makipag-ugnayan sa kanya sa [protektado ng email].
Mas marami pang artikulo
Si Agne ay isang mamamahayag na sumasaklaw sa pinakabagong mga uso at pag-unlad sa metaverse, AI, at Web3 mga industriya para sa Metaverse Post. Ang kanyang hilig sa pagkukuwento ay nagbunsod sa kanya na magsagawa ng maraming panayam sa mga eksperto sa mga larangang ito, na laging naghahangad na tumuklas ng mga kapana-panabik at nakakaakit na mga kuwento. Si Agne ay mayroong Bachelor's degree sa panitikan at may malawak na background sa pagsulat tungkol sa malawak na hanay ng mga paksa kabilang ang paglalakbay, sining, at kultura. Nagboluntaryo din siya bilang isang editor para sa organisasyon ng mga karapatang panghayop, kung saan tumulong siya na itaas ang kamalayan tungkol sa mga isyu sa kapakanan ng hayop. Makipag-ugnayan sa kanya sa [protektado ng email].
