摘要
本发明涉及一种识别口腔动作的方法、装置、存储介质和电子设备,方法包括:获取肌电图信号进行短时傅里叶变换,获取肌电低频特征和肌电高频特征,构建肌电图特征矩阵,获取脑电图信号进行连续小波变换,获取脑电时频波段特征,构建脑电图特征矩阵,将特征矩阵映射至同一特征空间内,得到脑电变换特征及肌电变换特征并对拼接后结果执行均值归零及方差归一化操作,得到标准化特征矩阵;基于标准化特征矩阵、线性映射矩阵以及轻量化自注意力函数,获取自适应加权特征向量;计算自适应加权特征向量分别与预先标注的各口腔动作类别对应的原型特征向量之间的距离,基于计算的距离确定所述自适应加权特征向量的口腔动作类别。可以提升沟通效率。
技术关键词
变换特征
连续小波变换
样本
注意力
短时傅里叶变换
高频特征
协方差矩阵特征
融合特征
加权特征
深度神经网络
融合策略
原型
表面肌电传感器
脑机接口信号
跨模态
创伤性脑损伤
神经退行性疾病
对象
系统为您推荐了相关专利信息
加速退化模型
拉丁超立方采样
Kriging模型
输入输出关系
参数
注意力机制
语义分割方法
语义特征
序列化特征
数据
数据集获取方法
视频生成模型
数据格式
关键帧
文本
文本分类方法
样本
非暂态计算机可读存储介质
大语言模型
文本分类装置