גוגל הציגה מודל AI להמחשת מאמרי חדשות
בקיצור
גוגל מכריזה על מודל AI חדש להפקת סיכומים חזותיים באיכות גבוהה של מאמרי חדשות
לגוגל יש הודיע מודל חדש של בינה מלאכותית (AI) שלדבריה יכול ליצור באופן אוטומטי סיכומים חזותיים "קוהרנטיים ושוטפים" של כתבות חדשותיות. ענקית הטכנולוגיה אומרת שהמודל יכול לעזור להפוך מידע נגיש יותר למשתמשים על ידי יצירת סיכומים חזותיים "איכותיים" של קטעי טקסט ארוכים.
המודל מבוסס על אלגוריתם למידה עמוקה המכונה שנאי, אשר נועד "להבין" את ההקשר של משפט ולאחר מכן ליצור איור ששומר על המידע החשוב מהטקסט המקורי.
גוגל מבצעת את המשימה הרבה יותר מאתגרת של הבנת ההקשר הכולל של הטקסט כולו, בניגוד לזו הפופולרית כיום טקסט לתמונה מערכות, המבוססות על תיאור "פרונטלי" של עקרון "מה שאני רואה, אני מצייר". בנוסף, בחירת התמונות נעשית כדי ליצור "תמונה כולה" ולא הצהרות וביטויים בודדים (כפי שכמעט כולם עושים כעת). במילים אחרות, תמונות נבחרות עבור המאמר כולו תוך התחשבות בהקשרים ומשמעויות.
גוגל טוענת שהמודל יכול להפיק סיכומים של משפטים מרובים ממאמר חדשותי, וכך היה מאומן על מערך נתונים גדול NewsStories, שמכיל כמעט 31 מיליון כתבות, 22 מיליון תצלומים ומיליון סרטונים מוסתרים בין השיחים.
בפרויקט זה אנו לוקחים על עצמנו אתגר חדש לגמרי: יצירת סיכומים ויזואליים, שהם טקסטים ארוכים יותר מלווים באוסף תמונות. על ידי שליטה בשתי משימות MIL (למידה מרובות מופעים), המטרה היא למקסם את הדמיון הסמנטי בין כל מאמר לתמונות הקלט.
השלב הראשון הוא להתאים את התמונה למאמר השלם לאחר שתורגם לייצוגים המתאימים תוך שימוש גם בשפה וגם במקודדי התמונה.
השלב השני כולל חלוקת מאמר טקסט למשפטים נפרדים וקידוד כל משפט לייצוג אחר. המטרה היא לייעל את המידע ההדדי, defined במונחים של התפלגות הסתברות, בין רצפי תמונה וטקסט. הדיוק הגדול ביותר התקבל כתוצאה מכך.
לסיכום, מחקר זה תורם מגוון של תרומות, החל מיישומים כמו איור נרטיבי אוטומטי ועד למשימה המאתגרת של התאמת סיפור ואוסף איורים. החברה אומרת ש מודל ניתן להחיל גם על שפות אחרות ושהוא עובד על הרחבת מערך הנתונים כך שיכלול מאמרים מאתרים אחרים.
קרא עוד מאמרים קשורים:
כתב ויתור
בקנה אחד עם הנחיות פרויקט אמון, אנא שים לב שהמידע המסופק בדף זה אינו מיועד ואין לפרש אותו כייעוץ משפטי, מס, השקעות, פיננסי או כל צורה אחרת של ייעוץ. חשוב להשקיע רק את מה שאתה יכול להרשות לעצמך להפסיד ולפנות לייעוץ פיננסי עצמאי אם יש לך ספק. למידע נוסף, אנו מציעים להתייחס לתנאים ולהגבלות וכן לדפי העזרה והתמיכה שסופקו על ידי המנפיק או המפרסם. MetaversePost מחויבת לדיווח מדויק וחסר פניות, אך תנאי השוק עשויים להשתנות ללא הודעה מוקדמת.
על המחבר
דמיר הוא ראש הצוות, מנהל המוצר והעורך ב Metaverse Post, המכסה נושאים כגון AI/ML, AGI, LLMs, Metaverse ו Web3-בתחומים משיקים. המאמרים שלו מושכים קהל עצום של למעלה ממיליון משתמשים מדי חודש. נראה שהוא מומחה עם ניסיון של 10 שנים בקידום אתרים ושיווק דיגיטלי. דמיר הוזכר ב-Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ופרסומים אחרים. הוא נודד בין איחוד האמירויות, טורקיה, רוסיה וחבר העמים כנווד דיגיטלי. דמיר סיים תואר ראשון בפיזיקה, שלדעתו נתן לו את כישורי החשיבה הביקורתית הדרושים כדי להצליח בנוף המשתנה ללא הרף של האינטרנט.
מאמרים נוספים
דמיר הוא ראש הצוות, מנהל המוצר והעורך ב Metaverse Post, המכסה נושאים כגון AI/ML, AGI, LLMs, Metaverse ו Web3-בתחומים משיקים. המאמרים שלו מושכים קהל עצום של למעלה ממיליון משתמשים מדי חודש. נראה שהוא מומחה עם ניסיון של 10 שנים בקידום אתרים ושיווק דיגיטלי. דמיר הוזכר ב-Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ופרסומים אחרים. הוא נודד בין איחוד האמירויות, טורקיה, רוסיה וחבר העמים כנווד דיגיטלי. דמיר סיים תואר ראשון בפיזיקה, שלדעתו נתן לו את כישורי החשיבה הביקורתית הדרושים כדי להצליח בנוף המשתנה ללא הרף של האינטרנט.
