一种基于运动单元活动与表面肌电信号融合的无声语音识别方法

本发明公开了一种基于运动单元活动与表面肌电信号融合的无声语音识别方法，首先，通过肌电信号采集设备，在受试者面部及颈部相关发声肌群布置多通道表面电极阵列，采集其在执行无声语音任务过程中产生的表面肌电信号，然后对采集到的原始多通道肌电信号进行分解处理，提取运动单元的放电活动信息。结合原始多通道肌电信号与运动单元放电信息，提取时频域与运动单元相关的峰峰值特征，构建多模态特征输入，并构建多模态融合神经网络，实现无声语音指令的分类识别。