Ricostruzione di immagini visive dall'attività cervello umano misurata con fMRI

Per ricostruire immagini visive, abbiamo prima decodificato (Tradotta) cerebrali modelli di attività misurati in rete neurale profonda (DNN) Caratteristiche, poi alimentato quelle caratteristiche decodificati ad un algoritmo di ricostruzione. Il nostro algoritmo di ricostruzione parte da una data immagine iniziale e iterativamente ottimizza i valori dei pixel in modo che le caratteristiche DNN dell'immagine corrente diventano simili a quelli decodificata di attività cerebrale. Abbiamo applicato il nostro algoritmo di attività cerebrale raccolti durante immagini mentali.

Sinistra: immagini immaginate.
Diritto: immagini ricostruite. Il processo di ottimizzazione iterativo è mostrato.