Documento filtrado de Google revela desafíos para mantener la ventaja competitiva en IA
En Resumen
Un documento filtrado de un empleado de Google (Luke Sernau) sugiere que los modelos de lenguaje de código abierto están superando rápidamente los avances de Google.
El documento destaca la importancia de permitir integraciones de terceros y colaborar con esfuerzos externos en lugar de buscar modelos de lenguaje gigantes.
Los intentos de Google por salvaguardar sus ventajas tecnológicas frente a competidores como OpenAI son desafiantes.
Un individuo anónimo compartió un documento filtrado en un servidor público de Discord de un investigador dentro de Google, confirmó SemiAnalysis. El documento destaca que aunque OpenAI y Google están en una carrera para desarrollar los modelos de lenguaje más avanzados, su progreso se ve eclipsado rápidamente por los avances realizados en la comunidad de código abierto.
El documento contiene las opiniones personales de un empleado de Google y no representa los puntos de vista de la empresa en su conjunto. De acuerdo a informe de Bloomberg, Luke Sernau, ingeniero senior de software de Google, compartió el documento en una plataforma interna dentro de la empresa hace aproximadamente un mes.
“Mientras que nuestros modelos todavía tienen una ligera ventaja en términos de calidad, la brecha se está cerrando asombrosamente rápido. Los modelos de código abierto son más rápidos, más personalizables, más privados y, libra por libra, más capaces. Están haciendo cosas con parámetros de $ 100 y 13 mil millones con los que luchamos a $ 10 millones y 540 mil millones. Y lo están haciendo en semanas, no en meses”,
leyó el documento.
Se cuestionó el enfoque de la empresa hacia los modelos lingüísticos. Sernau escribió que Google no posee una “ingesta secreta” y que, en cambio, debería intentar aprender de esfuerzos externos y colaborar con ellos. El documento enfatizó la importancia de permitir integraciones de terceros y reconoció que es poco probable que las personas paguen por un modelo restringido cuando existen alternativas gratuitas de calidad comparable. Sernau también argumentó que la búsqueda de gigantes modelos de lenguaje estaba impidiendo el progreso y sugirió que las variantes más pequeñas deberían recibir más atención. El documento concluyó que los mejores modelos, a largo plazo, son aquellos sobre los que se puede iterar rápidamente.
El gráfico, que incluye las etiquetas “2 semanas de diferencia” y “1 semana de diferencia”, se derivó de un gráfico del anuncio de Vicuña 13-B. El autor modificó el gráfico original para ilustrar el rápido desarrollo de LLaMA Vicuña y Alpaca siguiendo el LLaMA desarrollo.
Los intentos de Google por salvaguardar sus ventajas tecnológicas frente a competidores como OpenAI han demostrado ser desafiantes. Además, con la creciente colaboración dentro de la comunidad investigadora, mantener una ventaja competitiva se ha vuelto aún más difícil. Con acceso asequible a investigaciones de vanguardia sobre LLM, las instituciones de todo el mundo están realizando estudios que superan con creces la capacidad de Google. Sernau sugiere que Google puede aferrarse a sus secretos mientras la innovación externa diluye su valor o buscar aprender de otros en la comunidad de investigación.
Más información:
Observación
En línea con la Directrices del Proyecto Confianza, tenga en cuenta que la información proporcionada en esta página no pretende ser ni debe interpretarse como asesoramiento legal, fiscal, de inversión, financiero o de cualquier otro tipo. Es importante invertir sólo lo que pueda permitirse perder y buscar asesoramiento financiero independiente si tiene alguna duda. Para mayor información sugerimos consultar los términos y condiciones así como las páginas de ayuda y soporte proporcionadas por el emisor o anunciante. MetaversePost se compromete a brindar informes precisos e imparciales, pero las condiciones del mercado están sujetas a cambios sin previo aviso.
Sobre el Autor
Agne es una periodista que cubre las últimas tendencias y desarrollos en metaverso, IA y Web3 industrias para la Metaverse Post. Su pasión por contar historias la ha llevado a realizar numerosas entrevistas con expertos en estos campos, buscando siempre descubrir historias apasionantes y atrapantes. Agne tiene una licenciatura en literatura y tiene una amplia experiencia escribiendo sobre una amplia gama de temas, incluidos viajes, arte y cultura. También se ofreció como editora voluntaria de la organización de derechos de los animales, donde ayudó a crear conciencia sobre cuestiones de bienestar animal. Contáctala en [email protected].
Más artículos
Agne es una periodista que cubre las últimas tendencias y desarrollos en metaverso, IA y Web3 industrias para la Metaverse Post. Su pasión por contar historias la ha llevado a realizar numerosas entrevistas con expertos en estos campos, buscando siempre descubrir historias apasionantes y atrapantes. Agne tiene una licenciatura en literatura y tiene una amplia experiencia escribiendo sobre una amplia gama de temas, incluidos viajes, arte y cultura. También se ofreció como editora voluntaria de la organización de derechos de los animales, donde ayudó a crear conciencia sobre cuestiones de bienestar animal. Contáctala en [email protected].
