摘要
本发明公开了一种基于对比学习模态匹配的汉语普通话言语解码方法,属于汉语普通话言语解码脑机接口领域。本方法通过可训练的大脑信号特征提取器与预训练的语音特征提取器分别提取对应模态数据的特征,利用对比学习方法建立相关样本之间的模态匹配模式,以信息噪声对比估计函数作为对比学习目标函数,在特征空间中迭代缩小锚点特征和正样本特征之间的距离,增大锚点特征和负样本特征之间的距离,实现了SEEG与音频对应样本在特征空间中的模态匹配,提升言语解码系统的识别准确率,对汉语普通话进行有效解码。
技术关键词
音频特征提取
特征提取器
数据
解码方法
可读存储介质
残差卷积神经网络
样本
锚点
计算机
语音特征提取
信号特征提取
谐波陷波
标记
超参数
解码系统
脑机接口
指令
系统为您推荐了相关专利信息
视频编码方法
码率
缓冲
拥塞控制算法
二分类模型