Dokumen Google yang Bocor Mendedahkan Cabaran dalam Mengekalkan Kelebihan Daya Saing dalam AI
Secara ringkas
Dokumen yang bocor daripada pekerja Google (Luke Sernau) menunjukkan bahawa model bahasa sumber terbuka dengan cepat mengatasi kemajuan Google.
Dokumen itu menyerlahkan kepentingan mendayakan integrasi pihak ketiga dan bekerjasama dengan usaha luar dan bukannya mengikuti model bahasa gergasi.
Percubaan Google untuk melindungi kelebihan teknologinya daripada pesaing seperti OpenAI adalah mencabar.
Seorang individu tanpa nama berkongsi dokumen yang bocor pada pelayan Discord awam daripada penyelidik dalam Google, SemiAnalysis mengesahkan. The dokumen menonjolkan bahawa walaupun OpenAI dan Google sedang berlumba untuk membangunkan model bahasa yang paling maju, kemajuan mereka dengan cepat dibayangi oleh kemajuan yang dibuat dalam komuniti sumber terbuka.
Dokumen tersebut mengandungi pendapat peribadi pekerja Google dan tidak mewakili pandangan syarikat secara keseluruhan. mengikut Bloomberg, Luke Sernau, jurutera perisian kanan di Google, berkongsi dokumen itu pada platform dalaman dalam syarikat kira-kira sebulan yang lalu.
“Walaupun model kami masih mempunyai sedikit kelebihan dari segi kualiti, jurang itu ditutup dengan cepat. Model sumber terbuka adalah lebih pantas, lebih boleh disesuaikan, lebih peribadi dan lebih mampu. Mereka melakukan perkara dengan param $100 dan 13B yang kami bergelut dengan $10J dan 540B. Dan mereka melakukannya dalam beberapa minggu, bukan bulan,"
dokumen dibaca.
Pendekatan syarikat terhadap model bahasa telah dipersoalkan. Sernau menulis bahawa Google tidak mempunyai "sos rahsia" dan sebaliknya harus melihat untuk belajar daripada dan bekerjasama dengan usaha luar. Dokumen itu menekankan kepentingan mendayakan penyepaduan pihak ketiga dan mengakui bahawa orang tidak mungkin membayar untuk model terhad apabila alternatif percuma dengan kualiti yang setanding wujud. Sernau juga berpendapat bahawa mengejar gergasi model bahasa telah menghalang kemajuan dan mencadangkan bahawa varian yang lebih kecil harus menerima lebih perhatian. Dokumen itu menyimpulkan bahawa model terbaik, dalam jangka panjang, adalah model yang boleh diulang dengan cepat.
Carta, yang merangkumi label "selang 2 minggu" dan "selang 1 minggu", diperoleh daripada carta dalam pengumuman Vicuna 13-B. Pengarang mengubah suai carta asal untuk menggambarkan perkembangan pesat LLaMA Vicuna dan Alpaca berikutan LLaMA pembangunan.
Percubaan Google untuk melindungi kelebihan teknologinya daripada pesaing seperti OpenAI telah terbukti mencabar. Selain itu, dengan kerjasama yang semakin meningkat dalam komuniti penyelidikan, mengekalkan kelebihan daya saing menjadi lebih sukar. Dengan akses yang berpatutan kepada penyelidikan canggih tentang LLM, institusi di seluruh dunia sedang menjalankan kajian yang jauh melebihi kapasiti Google. Sernau mencadangkan bahawa Google boleh sama ada berpegang pada rahsianya manakala inovasi luar mencairkan nilainya atau ingin belajar daripada orang lain dalam komuniti penyelidikan.
Baca lebih lanjut:
Penafian
Selaras dengan Garis panduan Projek Amanah, sila ambil perhatian bahawa maklumat yang diberikan pada halaman ini tidak bertujuan untuk menjadi dan tidak seharusnya ditafsirkan sebagai nasihat undang-undang, cukai, pelaburan, kewangan atau sebarang bentuk nasihat lain. Adalah penting untuk hanya melabur apa yang anda mampu kehilangan dan mendapatkan nasihat kewangan bebas jika anda mempunyai sebarang keraguan. Untuk maklumat lanjut, kami mencadangkan merujuk kepada terma dan syarat serta halaman bantuan dan sokongan yang disediakan oleh pengeluar atau pengiklan. MetaversePost komited kepada laporan yang tepat dan tidak berat sebelah, tetapi keadaan pasaran tertakluk kepada perubahan tanpa notis.
Tentang Pengarang
Agne ialah seorang wartawan yang membuat liputan tentang trend dan perkembangan terkini dalam metaverse, AI, dan Web3 industri untuk Metaverse Post. Keghairahannya untuk bercerita telah menyebabkan dia menjalankan banyak temu bual dengan pakar dalam bidang ini, sentiasa berusaha untuk mendedahkan cerita yang menarik dan menarik. Agne memegang ijazah Sarjana Muda dalam kesusasteraan dan mempunyai latar belakang yang luas dalam penulisan tentang pelbagai topik termasuk perjalanan, seni dan budaya. Dia juga menawarkan diri sebagai editor untuk organisasi hak haiwan, di mana dia membantu meningkatkan kesedaran tentang isu kebajikan haiwan. Hubungi dia [e-mel dilindungi].
lebih banyak artikel
Agne ialah seorang wartawan yang membuat liputan tentang trend dan perkembangan terkini dalam metaverse, AI, dan Web3 industri untuk Metaverse Post. Keghairahannya untuk bercerita telah menyebabkan dia menjalankan banyak temu bual dengan pakar dalam bidang ini, sentiasa berusaha untuk mendedahkan cerita yang menarik dan menarik. Agne memegang ijazah Sarjana Muda dalam kesusasteraan dan mempunyai latar belakang yang luas dalam penulisan tentang pelbagai topik termasuk perjalanan, seni dan budaya. Dia juga menawarkan diri sebagai editor untuk organisasi hak haiwan, di mana dia membantu meningkatkan kesedaran tentang isu kebajikan haiwan. Hubungi dia [e-mel dilindungi].
