Reconstrucción de imágenes visuales de la actividad del cerebro humano medido por fMRI

Para reconstruir imágenes visuales, primero decodificado (Texto traducido al) patrones de actividad cerebral medidos en la red neural profunda (DNN) caracteristicas, luego se alimenta esas características decodificados a un algoritmo de reconstrucción. Nuestro algoritmo de reconstrucción se inicia a partir de una imagen inicial dada y optimiza de forma iterativa los valores de los píxeles para que las funciones de DNN de la imagen actual se vuelven similares a los decodificado de la actividad cerebral. Hemos aplicado nuestro algoritmo para la actividad cerebral recogidos durante la imaginería mental.

Izquierda: imágenes imaginadas.
Derecho: Las imágenes reconstruidas. Se muestra el proceso de optimización iterativa.