Jälleenrakennus visuaalinen kuvasto ihmisen aivojen toimintaa mitattiin fMRI

Rekonstruoida visuaalisia kuvia, ensin dekoodattu (Kääntäjä) mitattuna aivojen toimintaa kuvioita syvään hermoverkko (DNN) ominaisuudet, syötetään sitten ne dekoodataan piirteitä kuin rekonstruointialgoritmia. Meidän rekonstruointialgoritmi alkaa tietystä alkukuvan iteratiivisesti optimoi pikseliarvot jotta DNN piirteet nykyisen kuvan tulee samanlaisia ​​kuin dekoodata aivotoiminnan. Emme pyytäneet algoritmiamme aivotoiminnan aikana kerätyt mielikuvitukseen.

Vasemmalle: kuvitellut kuvia.
Oikeus: rekonstruoitu kuvia. Iteratiivinen optimointi on esitetty menetelmä,.