מודל AI MinD-Vis יכול לקרוא את מחשבותיהם של אנשים על סמך פעילות מוחית
בקיצור
מודל AI יכול לפרש את מה שאדם רואה על סמך פעילות המוח – הנה איך
מודל AI חדש בשם MinD-Vis יכול לפרש את מה שאדם רואה על סמך פעילות המוח. המודל פועל על ידי פירוש ה'אינוריאנטים האמנמוניים' הקיימים במוח כאשר אדם רואה אובייקט. אינוריאנטים מנמוניים אלה הם דפוסים שנשמרים על פני זיכרונות שונים של אותו אובייקט.
על מנת להשיג הטמעות גלובליות של פעילות המוח, המחברים אימנו תחילה מודל בפיקוח עצמי (זהה עבור אנשים שונים). לאחר מכן הם הציגו תשומת לב צולבת לייצוגים המנטאליים הללו תוך שימוש במאומנים מראש דיפוזיה סמויה. הדוגמנית הצליחה לפענח לחלוטין את מה שאדם רואה מולו לאחר כוונון מהיר של 1.5k תמונה-fMRI זוגות!
על מנת להבין טוב יותר את מערכת הראייה האנושית ולספק את הבסיס לגישור בין הראייה האנושית והממוחשבת באמצעות ממשק המוח-מחשב, פענוח גירויים חזותיים מהקלטות המוח מנסה להרחיב את הבנתנו את מערכת הראייה. המורכבות של הייצוגים הבסיסיים של אותות מוח והמחסור בהערות נתונים מקשים על יצירה מחדש של תמונות מדויקות באיכות גבוהה מהקלטות מוח.
ראשית, באמצעות דוגמנות מסכות במרחב סמוי גדול בהשראת הקידוד הדליל של המידע בקליפת המוח החזותית הראשית, אנו יוצרים ייצוג יעיל בפיקוח עצמי של נתוני fMRI. לאחר מכן, אנו מדגימים ש-MinD-Vis יכולה לבנות מחדש תמונות אמינות ביותר עם פרטים מותאמים מבחינה סמנטית מהקלטות המוח באמצעות מספר מינימלי של הערות זוגיות על ידי הוספת התניה כפולה למודל דיפוזיה סמוי.
טענו חוקרים
על פי תוצאות הניסוי, האסטרטגיה עלתה על הביצועים העדכניים ביותר במיפוי סמנטי (סיווג סמנטי של 100 כיוונים) ואיכות הייצור (FID) ב-66% ו-41%, בהתאמה. המודל הובחן הן מבחינה איכותית והן מבחינה כמותית. על מנת להעריך את המסגרת, בוצע גם מחקר יסודי בנושא אבלציה.
נתוני האימון, הקוד ומשקולות הדגם זמינים כולם לציבור לבקש.
החוקרים מאמינים כי ניתן להשתמש במודל לפיתוח תותבות עבור אנשים עיוורים או בעלי ראייה לקויה. זה יכול לשמש גם כדי לעזור לאנשים עם הפרעות זיכרון, כגון מחלת אלצהיימר.
קרא עוד:
כתב ויתור
בקנה אחד עם הנחיות פרויקט אמון, אנא שים לב שהמידע המסופק בדף זה אינו מיועד ואין לפרש אותו כייעוץ משפטי, מס, השקעות, פיננסי או כל צורה אחרת של ייעוץ. חשוב להשקיע רק את מה שאתה יכול להרשות לעצמך להפסיד ולפנות לייעוץ פיננסי עצמאי אם יש לך ספק. למידע נוסף, אנו מציעים להתייחס לתנאים ולהגבלות וכן לדפי העזרה והתמיכה שסופקו על ידי המנפיק או המפרסם. MetaversePost מחויבת לדיווח מדויק וחסר פניות, אך תנאי השוק עשויים להשתנות ללא הודעה מוקדמת.
על המחבר
דמיר הוא ראש הצוות, מנהל המוצר והעורך ב Metaverse Post, המכסה נושאים כגון AI/ML, AGI, LLMs, Metaverse ו Web3-בתחומים משיקים. המאמרים שלו מושכים קהל עצום של למעלה ממיליון משתמשים מדי חודש. נראה שהוא מומחה עם ניסיון של 10 שנים בקידום אתרים ושיווק דיגיטלי. דמיר הוזכר ב-Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ופרסומים אחרים. הוא נודד בין איחוד האמירויות, טורקיה, רוסיה וחבר העמים כנווד דיגיטלי. דמיר סיים תואר ראשון בפיזיקה, שלדעתו נתן לו את כישורי החשיבה הביקורתית הדרושים כדי להצליח בנוף המשתנה ללא הרף של האינטרנט.
מאמרים נוספים
דמיר הוא ראש הצוות, מנהל המוצר והעורך ב Metaverse Post, המכסה נושאים כגון AI/ML, AGI, LLMs, Metaverse ו Web3-בתחומים משיקים. המאמרים שלו מושכים קהל עצום של למעלה ממיליון משתמשים מדי חודש. נראה שהוא מומחה עם ניסיון של 10 שנים בקידום אתרים ושיווק דיגיטלי. דמיר הוזכר ב-Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ופרסומים אחרים. הוא נודד בין איחוד האמירויות, טורקיה, רוסיה וחבר העמים כנווד דיגיטלי. דמיר סיים תואר ראשון בפיזיקה, שלדעתו נתן לו את כישורי החשיבה הביקורתית הדרושים כדי להצליח בנוף המשתנה ללא הרף של האינטרנט.
