חוקרי טקסס מציעים שיטה חדשה לשחזור טקסט המבוסס על אותות MRI מוח ובינה מלאכותית
בקיצור
אוניברסיטת טקסס הציעה שיטה חדשה לשחזור הטקסט שאדם שומע על סמך אות MRI במוח.
השיטה כוללת אימון של רשת מקודד לשחזור תמונת ה-MRI של המוח התואמת לטקסט, ושימוש במודלים של שפה מאומנים מראש ליצירת אפשרויות להמשך הטקסט.
סטטיסטית טקסטים שנוצרו קרובים יותר למקור מאשר אלה אקראיים וניתן להשתמש בהם כדי לחקור את הפונקציות של חלקים שונים במוח.
חוקרים מאוניברסיטת טקסס הציעו שיטה חדשה לשחזור טקסט מאות MRI במוח. יתר על כן, פענוח מתרחש בטקסט קוהרנטי הדומה מבחינה סמנטית לטקסט האמיתי.
ניסו בעבר לפענח טקסט שאדם שומע (או אומר בראשו). בהתאם לאופן הוצאת האות מהמוח, ישנן שתי גישות שונות. חילוץ אותות בסגנון פלישה הוא הראשון: שבב ש קורא דחפים ישירות מהמוח נוירונים ממוקמים בגולגולת של אדם. השיטה פולשנית, יקרה ומסובכת. טכניקות מיצוי אותות לא פולשניות, כולל MRI ו-M/EEG, הן האפשרות השנייה; הם אינם דורשים כל קידוח והם זולים יותר.
עם זאת, לטכניקות לא פולשניות לאיסוף אותות מוח יש פגם אחד חמור: קריאות ה-MRI של אדם מושפעות מגירוי זה במשך כ-10 שניות לאחר החשיפה לגירוי (כגון שמיעת מילה). יליד אנגלית יכול לומר שתי מילים בשנייה בממוצע. מסתבר שכל תמונת MRI מכילה נתונים על עיבוד המוח בערך עשרים מילים אם מקליטים אות MRI תוך כדי האזנה לדוברי אנגלית.
כתוצאה מכך, באמצעות MRI, אי אפשר לשחזר בנאמנות את הטקסט שאדם שומע. בנוסף, הרבה מחקרים קודמים בנושא שחזור טקסט מאותות מוח שנאספו באמצעות טכניקות לא פולשניות הצליחו לאחזר רק מילים וביטויים ספציפיים.
והחוקרים מטקסס פיתחו טכניקת MRI לשחזור טקסט מובן (כמעט). תהיה שונות מסוימת בין הטקסט הזה לבין מה שהאדם שמע בפועל. עם זאת, הוא יהיה שווה ערך מבחינה סמנטית, כלומר הוא ייצג את הפרשנות המקובלת בדרך כלל.
כדי לשחזר את ה-MRI של המוח הקשור למעבר טקסט זה, החוקרים מאמנים את רשת המקודדים, שלומדת מקטע טקסט. לאחר מכן, באמצעות מודל שפה מיומן מראש (כגון GPT), החוקרים מבצעים את השלבים הבאים:
- שואלים חוקרים GPT ליצור אפשרויות רבות לקידום הטקסט כל שתי שניות. רשת המקודדים מקבלת את האפשרויות הרבות הללו ומנסה להשתמש בהן כדי לשחזר את תמונת ה-MRI הנוכחית. אנו חושבים שגרסת הטקסט שאפשרה את הייצוג המדויק ביותר של אות ה-MRI האמיתי היא המדויקת.
הנה דוגמא:
| קלט מקורי | תפוקת דור |
| לא ידעתי אם לצרוח, לבכות או לברוח. במקום זאת, אמרתי, "עזוב אותי בשקט; אני לא צריך את העזרה שלך." אדם נעלם, ואני ניקיתי לבד, בוכה. | התחלתי לצרוח ולבכות, ואז היא רק אמרה, אמרתי לך לעזוב אותי בשקט; אתה לא יכול לפגוע בי יותר. אני מצטער," ואז הוא הסתער. למרות שחשבתי שהוא עזב, התחלתי לבכות. |
לטכנולוגיה הזו יהיו שימושים רבים אם תשתמש בה כדי להמציא דיבור במקום להאזין להקלטות של אנשים אחרים. אפילו שחזור של דיבור פיקטיבי היה נושא לניסוי של מחברי המאמר. שוב, הטקסטים הסופיים התגלו כדומים יותר למקור מאשר לאקראיים. נראה שהגישה עובדת.
ובעזרת מודלים כאלה, אתה יכול לחקור את הפעולות של אזורי מוח שונים. במחקר זה, שלושה אזורים נפרדים במוח המטפלים בדיבור נשמע שימשו ליצירת אות ה-MRI. אפשר ללמוד איזה חלק מהמידע מעובד באיזה אזור במוח על ידי הוספה וביטול של אותות מחלקים שונים של המוח מהקלט של המודל. בנוסף, אתה יכול להבדיל שחזורים של מודל המקודד שנעשה באמצעות אותות ממרכיבים אחרים.
קרא עוד על AI:
כתב ויתור
בקנה אחד עם הנחיות פרויקט אמון, אנא שים לב שהמידע המסופק בדף זה אינו מיועד ואין לפרש אותו כייעוץ משפטי, מס, השקעות, פיננסי או כל צורה אחרת של ייעוץ. חשוב להשקיע רק את מה שאתה יכול להרשות לעצמך להפסיד ולפנות לייעוץ פיננסי עצמאי אם יש לך ספק. למידע נוסף, אנו מציעים להתייחס לתנאים ולהגבלות וכן לדפי העזרה והתמיכה שסופקו על ידי המנפיק או המפרסם. MetaversePost מחויבת לדיווח מדויק וחסר פניות, אך תנאי השוק עשויים להשתנות ללא הודעה מוקדמת.
על המחבר
דמיר הוא ראש הצוות, מנהל המוצר והעורך ב Metaverse Post, המכסה נושאים כגון AI/ML, AGI, LLMs, Metaverse ו Web3-בתחומים משיקים. המאמרים שלו מושכים קהל עצום של למעלה ממיליון משתמשים מדי חודש. נראה שהוא מומחה עם ניסיון של 10 שנים בקידום אתרים ושיווק דיגיטלי. דמיר הוזכר ב-Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ופרסומים אחרים. הוא נודד בין איחוד האמירויות, טורקיה, רוסיה וחבר העמים כנווד דיגיטלי. דמיר סיים תואר ראשון בפיזיקה, שלדעתו נתן לו את כישורי החשיבה הביקורתית הדרושים כדי להצליח בנוף המשתנה ללא הרף של האינטרנט.
מאמרים נוספים
דמיר הוא ראש הצוות, מנהל המוצר והעורך ב Metaverse Post, המכסה נושאים כגון AI/ML, AGI, LLMs, Metaverse ו Web3-בתחומים משיקים. המאמרים שלו מושכים קהל עצום של למעלה ממיליון משתמשים מדי חודש. נראה שהוא מומחה עם ניסיון של 10 שנים בקידום אתרים ושיווק דיגיטלי. דמיר הוזכר ב-Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ופרסומים אחרים. הוא נודד בין איחוד האמירויות, טורקיה, רוסיה וחבר העמים כנווד דיגיטלי. דמיר סיים תואר ראשון בפיזיקה, שלדעתו נתן לו את כישורי החשיבה הביקורתית הדרושים כדי להצליח בנוף המשתנה ללא הרף של האינטרנט.
