摘要
本发明涉及计算机视觉技术领域,更具体地,本发明涉及一种基于3DMM的三维面部动画生成方法及其系统,包括:构建三维脸部模型;获取目标音频,并提取所述目标音频中的情感特征,将所述情感特征输入训练好的ExpNet网络中,得到预测表情系数;将所述预测表情系数应用至三维脸部模型,生成所述三维脸部模型的面部表情;将所述目标音频输入训练好的PoseVAE网络,得到预测头部姿态信息,将所述预测头部姿态信息应用至三维脸部模型,得到头部动画。本发明通过在面部动画生成过程中,充分考虑了音频与面部表情之间的内在联系,通过深度学习模型实现了自动化、高准确性和多样化的生成效果,为用户提供更加真实、自然的面部动画体验。
技术关键词
三维脸部模型
动画生成方法
头部姿态信息
面部
情感特征
音频特征提取
梅尔频率倒谱系数
动画生成系统
计算机视觉技术
深度学习模型
颜色校正
实时系统
网络
随机噪声
关键点
存储器
处理器
算法