मानव मस्तिष्क की गतिविधियों से दृश्य कल्पना fMRI द्वारा मापा के पुनर्निर्माण

दृश्य छवियों को फिर से संगठित करने के लिए, हम पहले डीकोड (अनुवाद) गहरी तंत्रिका नेटवर्क में मापा जाता मस्तिष्क गतिविधि पैटर्न (डीएनएन) विशेषताएं, फिर एक पुनर्निर्माण एल्गोरिथ्म के लिए उन डीकोड सुविधाओं खिलाया. हमारे पुनर्निर्माण एल्गोरिथ्म किसी प्रारंभिक छवि से शुरू होता है और iteratively पिक्सेल मूल्यों का अनुकूलन इतना है कि वर्तमान छवि की DNN सुविधाओं मस्तिष्क की गतिविधियों से डीकोड उन लोगों के समान हो जाते हैं. हम मस्तिष्क की गतिविधियों के लिए हमारी कलनविधि मानसिक कल्पना के दौरान एकत्र लागू.

बाईं ओर: कल्पना की छवियों.
अधिकार: पुनर्निर्मित छवियों. पुनरावृत्ति अनुकूलन प्रक्रिया दिखाया गया है.