ฟื้นฟูของภาพวาดจากการทำงานของสมองมนุษย์ที่วัดโดย fMRI

เพื่อสร้างภาพ, ครั้งแรกที่เราถอดรหัส (ฉบับแปล) วัดรูปแบบการทำงานของสมองเข้าสู่เครือข่ายประสาทลึก (DNN) คุณสมบัติ, เลี้ยงแล้วคุณลักษณะถอดรหัสเหล่านั้นไปยังขั้นตอนวิธีการฟื้นฟู. ขั้นตอนวิธีการฟื้นฟูของเราเริ่มต้นจากภาพเริ่มต้นที่กำหนดและซ้ำเพิ่มประสิทธิภาพค่าพิกเซลเพื่อให้คุณสมบัติของ DNN ภาพปัจจุบันกลายเป็นคล้ายกับที่ถอดรหัสจากการทำงานของสมอง. เรานำมาใช้อัลกอริทึมของเราในการทำงานของสมองในระหว่างการเก็บรวบรวมภาพจิต.

ซ้าย: ภาพจินตนาการ.
ขวา: ภาพที่สร้างขึ้นใหม่. การเพิ่มประสิทธิภาพซ้ำจะแสดง.