Neurons++

新框架可从fMRI数据重建图像和视频

研究人员开发了Neurons++，一个用于从功能性磁共振成像（fMRI）数据重建图像和视频的新型框架。该系统扩展了先前的工作，不仅能够重建视频，还能重建静态图像，超越了仅限视频的功能。Neurons++采用受皮层启发的串行解码方法，首先进行图像-fMRI预训练以进行空间语义初始化，然后针对特定重建任务进行微调。该框架在视频重建方面表现出最先进的性能，在图像重建方面也取得了有竞争力的结果，分析显示其具有方向可控性并对刺激相关的皮层特征敏感。