一种基于预训练扩散模型的脑电信号解码及可视化方法、装置、设备、介质及产品

本申请公开了一种基于预训练扩散模型的脑电信号解码及可视化方法、装置、设备、介质及产品，涉及生物特征领域中的脑电信号，该方法包括设计实验范式，获取原始脑电信号；对原始脑电信号进行处理，得到处理后的脑电信号；根据语言‑图像预训练BLIP模型从视觉刺激图像中得到文本描述；根据语言‑图像预训练CLIP模型从文本描述中得到文本嵌入；构建和训练EEG编码器，将脑电信号映射到文本嵌入空间，得到脑电嵌入；对预训练扩散模型Stable Diffusion进行微调，得到调整后的预训练扩散模型；根据调整后的预训练扩散模型对脑电嵌入进行重构，得到语义一致的图像，解决了难以从脑电数据中解码出细粒度语义信息的问题，实现了将EEG重构为与视觉刺激语义一致的图像。