一种自然图像的人脑认知文本描述生成方法及系统

本发明涉及计算机视觉与认知神经科学领域，特别是涉及一种自然图像的人脑认知文本描述生成方法及系统，本发明通过预先构建将fMRI信号与经CLIP针对各种复杂场景获取的图像特征向量和文本特征向量形成映射的fMRI‑Image映射模型，并将获取到的人脑基于刺激图像产生的fMRI信号，并对获取到的fMRI信号进行预处理，以得到处理后的fMRI信号，将预处理后的fMRI信号输入到构建fMRI‑Image映射模型中，以得到图像特征向量和文本特征向量，将fMRI‑Image映射模型输出的图像特征向量和文本特征向量输入到预训练的语言映射模型，以生成图像文本描述，从而能够从复杂的自然场景中提取视觉语义特征，有助于准确生成对自然图像的文本描述。