一种基于耳机惯性传感器的汉语失声人群唇语实时识读方法

本发明公开了一种基于耳机惯性传感器的汉语失声人群唇语实时识读方法，属于唇语翻译技术领域；方法为：获取惯性数据；利用轻量级方法分割出音节惯性数据；利用一致性方法融合加速度计音节惯性数据和陀螺仪音节惯性数据；利用动态时间规整距离DTW方法识别音节惯性数据；利用汉语的上下文信息完善和纠正字符的选择。本发明通过转换器实现惯性数据的扩充，并对数据进行处理，消除噪声数据；基于归一化最小均方算法NLMS，将干净的清晰度相关信号与受说话人干扰影响的清晰度相关信号分离，实现对耳机扬声器在音频播放过程中产生的振动影响的消除；抑制了用户和设备之间多样性的影响，保证实时唇语翻译的正确率和准确率。