Documento vazado do Google revela desafios para manter a vantagem competitiva em IA
Em Breve
Um documento vazado de um funcionário do Google (Luke Sernau) sugere que os modelos de linguagem de código aberto estão superando rapidamente os avanços do Google.
O documento destaca a importância de permitir integrações de terceiros e colaborar com esforços externos em vez de buscar modelos gigantes de linguagem.
As tentativas do Google de proteger suas vantagens tecnológicas de concorrentes como OpenAI são desafiadores.
Um indivíduo anônimo compartilhou um documento vazado em um servidor público do Discord de um pesquisador do Google, confirmou a SemiAnalysis. O documento destaca que embora OpenAI e o Google estão em uma corrida para desenvolver os modelos de linguagem mais avançados, seu progresso está sendo rapidamente ofuscado pelos avanços feitos na comunidade de código aberto.
O documento contém as opiniões pessoais de um funcionário do Google e não representa as opiniões da empresa como um todo. De acordo com Bloomberg, Luke Sernau, engenheiro de software sênior do Google, compartilhou o documento em uma plataforma interna da empresa há cerca de um mês.
“Embora nossos modelos ainda tenham uma ligeira vantagem em termos de qualidade, a diferença está se fechando surpreendentemente rapidamente. Os modelos de código aberto são mais rápidos, mais personalizáveis, mais privados e mais capazes. Eles estão fazendo coisas com parâmetros de $ 100 e 13 bilhões com os quais lutamos em $ 10 milhões e 540 bilhões. E eles estão fazendo isso em semanas, não meses”,
o documento lido.
A abordagem da empresa aos modelos de linguagem foi questionada. Sernau escreveu que o Google não possui um “molho secreto” e, em vez disso, deveria procurar aprender e colaborar com esforços externos. O documento enfatizou a importância de permitir integrações de terceiros e reconheceu que é improvável que as pessoas paguem por um modelo restrito quando existem alternativas gratuitas de qualidade comparável. Sernau também argumentou que a busca por gigantes modelos de linguagem estava impedindo o progresso e sugeriu que variantes menores deveriam receber mais atenção. O documento concluiu que os melhores modelos, no longo prazo, são aqueles que podem ser rapidamente iterados.
O gráfico, que inclui os rótulos “2 semanas de intervalo” e “1 semana de intervalo”, foi derivado de um gráfico do anúncio do Vicuna 13-B. O autor modificou o gráfico original para ilustrar o rápido desenvolvimento de LLaMA Vicuna e Alpaca seguindo o LLaMA desenvolvimento.
As tentativas do Google de proteger suas vantagens tecnológicas de concorrentes como OpenAI têm se mostrado desafiadores. Além disso, com a crescente colaboração dentro da comunidade de pesquisa, manter uma vantagem competitiva tornou-se ainda mais difícil. Com acesso acessível a pesquisas de ponta sobre LLMs, instituições em todo o mundo estão realizando estudos que superam em muito a capacidade do Google. Sernau sugere que o Google pode se apegar a seus segredos enquanto a inovação externa dilui seu valor ou procurar aprender com outros na comunidade de pesquisa.
Leia mais:
Aviso Legal
Em linha com a Diretrizes do Projeto Trust, observe que as informações fornecidas nesta página não se destinam e não devem ser interpretadas como aconselhamento jurídico, tributário, de investimento, financeiro ou qualquer outra forma. É importante investir apenas o que você pode perder e procurar aconselhamento financeiro independente se tiver alguma dúvida. Para mais informações, sugerimos consultar os termos e condições, bem como as páginas de ajuda e suporte fornecidas pelo emissor ou anunciante. MetaversePost está comprometida com relatórios precisos e imparciais, mas as condições de mercado estão sujeitas a alterações sem aviso prévio.
Sobre o autor
Agne é uma jornalista que cobre as últimas tendências e desenvolvimentos no metaverso, IA e Web3 indústrias para o Metaverse Post. Sua paixão por contar histórias a levou a realizar inúmeras entrevistas com especialistas nessas áreas, sempre buscando descobrir histórias emocionantes e envolventes. Agne é bacharel em literatura e possui ampla experiência em redação sobre uma ampla variedade de tópicos, incluindo viagens, arte e cultura. Ela também foi voluntária como editora da organização de direitos dos animais, onde ajudou a aumentar a conscientização sobre questões de bem-estar animal. Entre em contato com ela [email protegido].
Mais artigos
Agne é uma jornalista que cobre as últimas tendências e desenvolvimentos no metaverso, IA e Web3 indústrias para o Metaverse Post. Sua paixão por contar histórias a levou a realizar inúmeras entrevistas com especialistas nessas áreas, sempre buscando descobrir histórias emocionantes e envolventes. Agne é bacharel em literatura e possui ampla experiência em redação sobre uma ampla variedade de tópicos, incluindo viagens, arte e cultura. Ela também foi voluntária como editora da organização de direitos dos animais, onde ajudou a aumentar a conscientização sobre questões de bem-estar animal. Entre em contato com ela [email protegido].
