מסמך Google שהודל חושף אתגרים בשמירה על יתרון תחרותי בבינה מלאכותית
בקיצור
מסמך שדלף מעובד של גוגל (לוק סרנאו) מצביע על כך שמודלים של שפות קוד פתוח עולים במהירות על ההתקדמות של גוגל.
המסמך מדגיש את החשיבות של הפעלת אינטגרציות של צד שלישי ושיתוף פעולה עם מאמצים חיצוניים במקום לרדוף אחר מודלים של שפה ענקית.
ניסיונותיה של גוגל לשמור על יתרונותיה הטכנולוגיים מפני מתחרים כגון OpenAI מאתגרים.
אדם אנונימי שיתף מסמך שדלף בשרת דיסקורד ציבורי מחוקר בגוגל, אישר SemiAnalysis. ה מסמך מדגיש כי למרות OpenAI וגוגל נמצאות במרוץ לפיתוח מודלים של שפה מתקדמים ביותר, ההתקדמות שלהן מאפילה במהירות על ידי ההתקדמות שנעשתה בקהילת הקוד הפתוח.
המסמך מכיל את הדעות האישיות של עובד Google ואינו מייצג את הדעות של החברה כולה. לפי בלומברג, לוק סרנאו, מהנדס התוכנה הבכיר בגוגל, שיתף את המסמך בפלטפורמה פנימית בחברה לפני כחודש.
"בעוד שהדגמים שלנו עדיין מחזיקים ביתרון קל מבחינת איכות, הפער נסגר במהירות מדהימה. מודלים של קוד פתוח מהירים יותר, ניתנים להתאמה אישית, פרטיים יותר ובעלי יכולת גבוהה יותר של פאונד תמורת פאונד. הם עושים דברים עם פרמטרים של 100 ו-13 מיליארד דולר שאנחנו נאבקים איתם ב-10 מיליון דולר ו-540 מיליארד דולר. והם עושים זאת בשבועות, לא חודשים",
המסמך נקרא.
הגישה של החברה למודלים של שפה הועמדה בספק. סרנאו כתב שלגוגל אין "רוטב סודי" ובמקום זאת היא צריכה לנסות ללמוד ולשתף פעולה עם מאמצים חיצוניים. המסמך הדגיש את החשיבות של הפעלת אינטגרציות של צד שלישי והכיר בכך שסביר שאנשים לא ישלמו עבור מודל מוגבל כאשר קיימות חלופות חינמיות באיכות דומה. סרנאו גם טען כי המרדף אחר ענק מודלים של שפה מעכב את ההתקדמות והציע שגרסאות קטנות יותר יקבלו יותר תשומת לב. המסמך הגיע למסקנה שהדגמים הטובים ביותר, בטווח הארוך, הם אלה שניתן לחזור עליהם במהירות.
התרשים, הכולל את התוויות "2 שבועות בהפרש" ו"1 שבוע בהפרש", נגזר מתרשים בהכרזה של Vicuna 13-B. המחבר שינה את התרשים המקורי כדי להמחיש את ההתפתחות המהירה של LLaMA ויקונה ואלפקה בעקבות LLaMA פיתוח.
הניסיונות של גוגל להגן על היתרונות הטכנולוגיים שלה מפני מתחרים כמו OpenAI הוכחו כמאתגרים. יתרה מכך, עם שיתוף הפעולה הגובר בתוך קהילת המחקר, שמירה על יתרון תחרותי הפכה לקשה עוד יותר. עם גישה נוחה למחקר חדשני בנושאי LLM, מוסדות ברחבי העולם עורכים מחקרים שעולים בהרבה על היכולת של גוגל. סרנאו מציע שגוגל יכולה לדבוק בסודותיה בעוד חדשנות מבחוץ מדללת את ערכה או לנסות ללמוד מאחרים בקהילת המחקר.
קרא עוד:
כתב ויתור
בקנה אחד עם הנחיות פרויקט אמון, אנא שים לב שהמידע המסופק בדף זה אינו מיועד ואין לפרש אותו כייעוץ משפטי, מס, השקעות, פיננסי או כל צורה אחרת של ייעוץ. חשוב להשקיע רק את מה שאתה יכול להרשות לעצמך להפסיד ולפנות לייעוץ פיננסי עצמאי אם יש לך ספק. למידע נוסף, אנו מציעים להתייחס לתנאים ולהגבלות וכן לדפי העזרה והתמיכה שסופקו על ידי המנפיק או המפרסם. MetaversePost מחויבת לדיווח מדויק וחסר פניות, אך תנאי השוק עשויים להשתנות ללא הודעה מוקדמת.
על המחבר
אגנה היא עיתונאית שמסקרת את המגמות וההתפתחויות האחרונות ב-metaverse, AI, ו Web3 תעשיות עבור Metaverse Post. התשוקה שלה לספר סיפורים הובילה אותה לערוך ראיונות רבים עם מומחים בתחומים אלה, כשהם מחפשים תמיד לחשוף סיפורים מרגשים ומרתקים. אגנה היא בעלת תואר ראשון בספרות ובעלת רקע נרחב בכתיבה על מגוון רחב של נושאים לרבות נסיעות, אמנות ותרבות. היא גם התנדבה כעורכת בארגון לזכויות בעלי חיים, שם סייעה להעלות את המודעות לנושאים של רווחת בעלי חיים. צור איתה קשר [מוגן בדוא"ל].
מאמרים נוספיםאגנה היא עיתונאית שמסקרת את המגמות וההתפתחויות האחרונות ב-metaverse, AI, ו Web3 תעשיות עבור Metaverse Post. התשוקה שלה לספר סיפורים הובילה אותה לערוך ראיונות רבים עם מומחים בתחומים אלה, כשהם מחפשים תמיד לחשוף סיפורים מרגשים ומרתקים. אגנה היא בעלת תואר ראשון בספרות ובעלת רקע נרחב בכתיבה על מגוון רחב של נושאים לרבות נסיעות, אמנות ותרבות. היא גם התנדבה כעורכת בארגון לזכויות בעלי חיים, שם סייעה להעלות את המודעות לנושאים של רווחת בעלי חיים. צור איתה קשר [מוגן בדוא"ל].