摘要
本发明提供一种虚拟人物形象的面部与头部驱动方法、装置、设备和介质,其中方法包括:获取用户输入的目标语音,对目标语音进行特征提取,得到目标语音的语音特征;将语音特征输入至预先训练的预测模型,得到预测模型输出的目标语音对应的目标控制器参数,目标控制器参数包括面部表情控制参数和头部运动控制参数;基于面部表情控制参数,对预先构建的虚拟人物形象的头部模型进行面部表情驱动,基于头部运动控制参数,对头部模型进行头部运动驱动;其中,预测模型是基于样本语音的语音特征,以及样本语音的控制器参数标签进行训练得到的。本发明可以提高虚拟人物面部表情和头部运动的拟真度、灵活性和自然性。
技术关键词
虚拟人物形象
头部模型
面部
语音特征
隐式特征
驱动方法
样本
控制器
运动
骨骼系统
标签
参数
非暂态计算机可读存储介质
头部驱动装置
视频
处理器
顶点
人脸
节点
系统为您推荐了相关专利信息
语音特征参数
语音传输方法
时间偏移量
信号
门控循环单元
语音情感识别模型
适配器
语音特征
分配器
识别方法
三维人脸模型
人脸数据采集
三维人脸数据
人脸识别系统
门禁人脸识别方法
特征提取单元
媒体流
生成系统
交叉注意力机制
语音特征提取