מדענים למדו כיצד לתרגם פעילויות מוח לטקסט

מדענים מאוניברסיטאות ייל, דרטמוט וקיימברידג 'פיתחו מודל Mindllm שיכול להמיר אותות של שכבת התהודה הפונקציונלית (FMRI) לטקסט. בניגוד לשיטות קודמות, זה אינו דורש הגדרות אישיות עבור כל אדם.

מוקדם יותר, המאמצים להמיר פעילות מוחית לטקסט נתקלו בבעיות מדויקות נמוכות, קבוצה של משימות מוגבלות ולא יכלו לעבוד עם אנשים שונים. המודלים הנוכחיים תלויים במאפיינים האישיים של המוח והידע נסבל בצורה לא טובה עבור משתמשים חדשים. Mindllm משתמש בגישה שונה המבוססת על טיפול בחוקים כלליים של תפקוד מוחי, ומאפשר לה להתאים טוב יותר לאנשים ומשימות שונות.

הדגם כולל שני רכיבים עיקריים: מקודד FMRI ורשת עצבים לשוניים. סרוק את המוח כדי לחלק אותו לאזורים קטנים של שלושה ממדיים – Vokseli, המספר והמיקומים אצל אנשים שונים. עם זאת, תפקודי המוח עדיין דומים וה- Mindllm מנתח את פעילות המוח, עם תכונה זו.

מנגנון עיבוד אותות מיוחד מסייע למודל להבין את המשמעות של מידע ושיטת הנחיית מוח (BIT) המשפרת את יכולת הפענוח המוחלטת שלו. זה מאפשר ל- Mindllm לבצע משימות מורכבות, כגון יצירת תיאורים של אותות מוח, תשובות לשאלות סבירות והנמקה.

בבדיקות, המודל מראה כי ההסתגלות טובה יותר ב -16.4% למשתמשים חדשים ו -25% עדיף להתמודד עם משימות חדשות בהשוואה לפתרונות קודמים. Mindllm חשף גם את הקשרים בין פעילותם של אזורים מסוימים במוח לבין תפקודים קוגניטיביים כמו מודעות וחשיבה.