Възстановяване на визуални образи от човешка мозъчна активност, измерена чрез магнитен резонанс

За да се възстанови визуални образи, за първи път се декодира (преведени) измерени модели активност на мозъка в дълбоки невронна мрежа (DNN) Характеристика, след това подава тези декодирани функции на алгоритъм реконструкция. Нашата реконструкция алгоритъм започва от даден начален образ и итеративно оптимизира пикселни стойности, така че функциите DNN на текущото изображение стават подобни на тези, декодирани от мозъчната дейност. Приложихме нашия алгоритъм за мозъчната дейност, събрани по време на психично изображения.

Ляв: Въобразените изображения.
Десен: реконструирани изображения. Процесът на итеративен оптимизация е показано.