שחזור של דימויים חזותיים מפעילות מוח אנושיות נמדדו על ידי fMRI

כדי לשחזר דימויים חזותיים, אנו מפוענחים ראשונים (מתורגם) דפוסי פעילות מוח נמדדו לתוך רשת עצבית עמוקה (DNN) מאפיינים, אז נמאס אלה תכונות מפוענחות אלגוריתם שחזור. אלגוריתם השחזור שלנו מתחיל מתמונה ראשונית נתונה באופן איטרטיבי מייעל את ערכי פיקסל כך תכונות DNN של התמונה הנוכחית הופכות דומות לאלה מפוענחים מפעילות מוח. יישמנו את האלגוריתם שלנו בפעילות המוח שנאסף במהלך דימויים מנטליים.

שמאל: תמונות מדומיינות.
נכון: תמונות משוחזרות. תהליך אופטימיזציה איטרטיבי מוצג.