一种基于功能性近红外光谱的大脑解码图像生成方法

本发明公开了一种基于功能性近红外光谱的大脑解码图像生成方法，包括：获取fNIRS信号、语音文本信号及眼动信号；将fNIRS信号及语音文本信号经过编码器编码为fNIRS编码，语音文本编码；将fNIRS编码，语音文本编码及眼动信号输入多模态融合模块中，生成控制图像去噪的控制向量；控制向量以互注意力的方式引入去噪U‑net，将白噪音图像去噪转化为大脑物体生成图像。本发明能够辅助用户通过语言与脑信号快速生成特定图像，能够提升人机交互效率。