基于深度学习的手机端面部动作恢复语音方法及系统

本发明提供一种基于深度学习的手机端面部动作恢复语音方法及系统，涉及语音处理技术领域，该方法包括调用手机加速度传感器实时同步采集面部加速度与语音数据并传输至电脑；在电脑端接收、对齐、存储数据并去噪以增强信噪比；构建模型，先由U‑Net模型将加速度信号转成4khz采样率的语音信号，再经SR‑model超分模型生成16khz采样率的语音信号；把处理后的面部加速度信号输入训练好的深度学习模型，生成语音并按需传出。本发明有效解决现有问题，实现从面部动作到语音的恢复，具有良好应用前景。