Реконструкција визуелних снимака из активности људског мозга мерено фМРИ

Да реконструише визуелне слике, прво декодира (prevesti) измерени мождана активност узорака у дубоку неуронске мреже (ДНН) Карактеристике, онда фед те декодиране функције у алгоритам реконструкције. Наш алгоритам реконструкција почиње од датог почетне слике и итеративно оптимизује вредности пиксела тако да карактеристике ДНН тренутне слике постају слични онима декодира из мождане активности. Ми примењено наш алгоритам за мождане активности прикупљени током менталног сликама.

Levo: замишљене слике.
Desno: реконструисане слике. Итеративни процес оптимизације је приказан.