Bocoran Dokumen Google Mengungkapkan Tantangan dalam Mempertahankan Keunggulan Kompetitif dalam AI
Singkatnya
Dokumen yang bocor dari seorang karyawan Google (Luke Sernau) menunjukkan bahwa model bahasa sumber terbuka dengan cepat melampaui kemajuan Google.
Dokumen tersebut menyoroti pentingnya mengaktifkan integrasi pihak ketiga dan berkolaborasi dengan upaya eksternal alih-alih mengejar model bahasa raksasa.
Upaya Google untuk melindungi keunggulan teknologinya dari pesaing seperti OpenAI menantang.
Seorang individu anonim membagikan dokumen yang bocor di server Discord publik dari seorang peneliti di Google, SemiAnalysis dikonfirmasi. Itu dokumen menyoroti itu meskipun OpenAI dan Google sedang berlomba untuk mengembangkan model bahasa yang paling canggih, kemajuan mereka dengan cepat dibayangi oleh kemajuan yang dicapai dalam komunitas sumber terbuka.
Dokumen tersebut berisi opini pribadi karyawan Google dan tidak mewakili pandangan perusahaan secara keseluruhan. Berdasarkan Bloomberg, Luke Sernau, insinyur perangkat lunak senior di Google, membagikan dokumen tersebut pada platform internal di dalam perusahaan sekitar sebulan yang lalu.
“Sementara model kami masih memiliki sedikit keunggulan dalam hal kualitas, kesenjangan tersebut menutup dengan sangat cepat. Model open-source lebih cepat, lebih dapat disesuaikan, lebih pribadi, dan pound-for-pound lebih mampu. Mereka melakukan hal-hal dengan parameter $100 dan 13 miliar yang kami perjuangkan dengan $10 juta dan 540 miliar. Dan mereka melakukannya dalam beberapa minggu, bukan bulan, ”
dokumen itu terbaca.
Pendekatan perusahaan terhadap model bahasa dipertanyakan. Sernau menulis bahwa Google tidak memiliki “saus rahasia” dan sebaliknya harus belajar dari dan berkolaborasi dengan upaya eksternal. Dokumen tersebut menekankan pentingnya memungkinkan integrasi pihak ketiga dan mengakui bahwa masyarakat tidak mungkin membayar untuk model yang terbatas ketika ada alternatif gratis dengan kualitas yang sebanding. Sernau juga berpendapat bahwa ia sedang mengejar raksasa model bahasa menghambat kemajuan dan menyarankan agar varian yang lebih kecil harus mendapat perhatian lebih. Dokumen tersebut menyimpulkan bahwa model terbaik, dalam jangka panjang, adalah model yang dapat diulangi dengan cepat.
Bagan tersebut, yang mencakup label “jarak 2 minggu” dan “jarak 1 minggu”, diambil dari bagan dalam pengumuman Vicuna 13-B. Penulis memodifikasi bagan asli untuk menggambarkan perkembangan pesat LLaMA Vicuna dan Alpaca mengikuti LLaMA pembangunan.
Upaya Google untuk melindungi keunggulan teknologinya dari pesaing sejenisnya OpenAI telah terbukti menantang. Terlebih lagi, dengan semakin berkembangnya kolaborasi dalam komunitas riset, mempertahankan keunggulan kompetitif menjadi semakin sulit. Dengan akses yang terjangkau terhadap penelitian mutakhir mengenai LLM, institusi di seluruh dunia melakukan penelitian yang jauh melampaui kapasitas Google. Sernau menyarankan agar Google tetap berpegang teguh pada rahasianya sementara inovasi dari luar melemahkan nilainya atau berusaha belajar dari pihak lain dalam komunitas riset.
Baca lebih lanjut:
Penolakan tanggung jawab
Sejalan dengan Percayai pedoman Proyek, harap dicatat bahwa informasi yang diberikan pada halaman ini tidak dimaksudkan untuk dan tidak boleh ditafsirkan sebagai nasihat hukum, pajak, investasi, keuangan, atau bentuk nasihat lainnya. Penting untuk hanya menginvestasikan jumlah yang mampu Anda tanggung kerugiannya dan mencari nasihat keuangan independen jika Anda ragu. Untuk informasi lebih lanjut, kami menyarankan untuk merujuk pada syarat dan ketentuan serta halaman bantuan dan dukungan yang disediakan oleh penerbit atau pengiklan. MetaversePost berkomitmen terhadap pelaporan yang akurat dan tidak memihak, namun kondisi pasar dapat berubah tanpa pemberitahuan.
Tentang Penulis
Agne adalah jurnalis yang meliput tren dan perkembangan terbaru di metaverse, AI, dan Web3 industri untuk Metaverse Post. Kecintaannya pada bercerita telah membawanya melakukan banyak wawancara dengan para ahli di bidang tersebut, selalu berusaha mengungkap cerita yang menarik dan memikat. Agne memegang gelar Sarjana Sastra dan memiliki latar belakang luas dalam menulis tentang berbagai topik termasuk perjalanan, seni, dan budaya. Dia juga menjadi sukarelawan sebagai editor di organisasi hak-hak hewan, di mana dia membantu meningkatkan kesadaran tentang masalah kesejahteraan hewan. Hubungi dia di [email dilindungi].
lebih artikelAgne adalah jurnalis yang meliput tren dan perkembangan terbaru di metaverse, AI, dan Web3 industri untuk Metaverse Post. Kecintaannya pada bercerita telah membawanya melakukan banyak wawancara dengan para ahli di bidang tersebut, selalu berusaha mengungkap cerita yang menarik dan memikat. Agne memegang gelar Sarjana Sastra dan memiliki latar belakang luas dalam menulis tentang berbagai topik termasuk perjalanan, seni, dan budaya. Dia juga menjadi sukarelawan sebagai editor di organisasi hak-hak hewan, di mana dia membantu meningkatkan kesadaran tentang masalah kesejahteraan hewan. Hubungi dia di [email dilindungi].