摘要
本发明涉及脑电信号处理技术领域,具体为一种基于自回归预训练和特征对齐的脑电图像生成方法,包括:1、将预处理后的脑电信号转换为脑电编码,计算脑电编码的位置编码,并将添加了位置编码的脑电编码传输到脑电自回归编码器中,得到潜在表征;2、利用自回归预训练法对脑电自回归编码器进行训练;3、利用潜在表征对CLIP模型进行训练;4、利用现有的脑电‑图像对数据集对稳定扩散模型内去噪U‑Net网络进行训练;5、对训练后的脑电自回归编码器、训练后的CLIP模型以及训练后的去噪U‑Net网络进行测试,并生成最终去噪后的图像。本发明通过特征对齐,建立了脑电信号与图像之间的映射关系,实现了从脑电到图像的跨模态转换。
技术关键词
生成方法
解码器
图像编码器
脑电信号处理技术
图像嵌入
矩阵
模块
多头注意力机制
前馈神经网络
索引
噪声预测
标签
参数
系统为您推荐了相关专利信息
粘弹性流体
粘弹性模型
计算机程序代码
通道
网格生成方法