摘要
本申请提供一种数字人表情驱动方法,涉及数字人生成技术领域,方法包括获取原始视频、表情训练视频以及表情提供视频;利用表情训练视频训练视频生成模型,得到目标视频生成模型;视频生成模型包括待训练的人脸重建模型以及训练完成的表情生成模型;表情训练视频用于训练人脸重建模型;人脸重建模型的训练过程包括通过双通道的跳跃式特征融合处理计算表情训练视频中人物的面部系数,并对面部系数进行收敛;根据原始视频、表情提供视频以及目标视频生成模型进行视频生成,得到目标视频;目标视频包括原始视频的人脸信息以及表情提供视频的表情信息。本申请通过上述生成方法解决了基于现有技术生成的驱动数字人表情过于生硬的问题。
技术关键词
表情驱动方法
视频生成模型
三维人脸网格
融合图像特征
图像重建
面部
解码
视频编码
重建人脸
通道
生成技术
生成方法
上采样
系统为您推荐了相关专利信息
悬架弹簧
在线检测系统
对齐模块
立体图像
图像重建
模型训练方法
图像重建
图像全局特征
深层特征提取
浅层特征提取
模型构建方法
仿真数据
全卷积神经网络
图像重建
模型构建系统
低剂量CT图像
循环卷积神经网络
原始图像数据
噪声信息
模块