一种语音驱动的时效性强的数字人口型合成算法

本发明涉及一种语音驱动的时效性强的数字人口型合成算法，本发明通过引入lip‑reading expert和预训练视频自动编码器作为监督，精心设计的特征融合模块和训练损失函数等技巧来提高数字人口型合成的效果，通过逐通道卷积、线性注意力等技巧来提高数字人口型合成的速度。并且具备可控张嘴幅度和多语言支持的功能。