基于三维唇部重建的唇动识别方法和装置

本发明公开了基于三维唇部重建的唇动识别方法和装置，方法包括：获取待识别唇读视频；生成待识别唇部图像；将待识别唇部图像输入目标三维唇部重建模型，得到待识别三维唇部数据；将待识别三维唇部数据输入目标唇动识别模型，得到唇动识别结果。其中，通过获取唇语视频；生成待训练唇部图像和文字信息；构建初始三维唇部重建模型；构建初始唇动识别模型；对初始三维唇部重建模型进行训练，得到目标三维唇部重建模型；将待训练唇部图像输入目标三维唇部重建模型，得到待训练三维唇部数据；对初始唇动识别模型进行训练，得到目标唇动识别模型。本发明实现了唇动识别，提高了准确度和鲁棒性。本发明可广泛应用于视觉语音识别技术领域。