摘要
一种柔性液态金属传感器及有声无声语音识别系统。贴合在喉部的柔性液态金属传感器用来检测人在说话或者不出声说话时由喉部低频肌肉运动和声音振动组成的混合模态信号。通过设计离散和连续传感器布局方式以准确捕捉喉部振动发声时频率及肌肉运动空间分布特征,测得不同方向不同位置处的压力信息。通过信号采集分析系统实现喉部数据采集及滤波处理,以构建喉部声振混合模态信号与表达的语音语义的关系数据集。通过建立基于时频特征的深度神经网络训练模型,对关系数据集进行训练,能够识别出人在说话或者不出声说话时所表达的内容,以满足语音残障人士和一般人在语音障碍的环境下对所表达内容进行传递的需求。
技术关键词
液态金属传感器
语音识别系统
深度学习训练
传感器单元
梅尔频率倒谱系数
短时傅里叶变换
微管
语音识别模块
电压
上位机通讯模块
音频解码器
柔性基底表面
通信模块
语句
微处理器
蜂窝移动网络技术
电路板