摘要
本申请实施例提供一种数字人动画生成方法、模型训练方法及计算设备。其中,基于目标音频数据,利用动画生成模型中的频编码网络,提取目标音频数据的目标音频时序特征;基于目标音频时序特征,利用动画生成模型中的情绪预测网络,预测目标音频数据的目标情绪强度特征;基于目标音频时序特征和目标情绪强度特征,利用动画生成模型中的特征连接网络,生成目标连接特征;基于目标连接特征,利用动画生成模型中的隐式记忆网络,生成目标连接特征的目标特征偏移信息;基于目标连接特征和目标特征偏移信息,利用动画生成模型中的表情输出网络,生成目标表情控制参数;根据目标表情控制参数,生成目标数字人动画。本申请实施例的技术方案提升动画拟人度。
技术关键词
时序特征
动画生成方法
样本
模型训练方法
网络
记忆
数据
强度
音频编码
存储组件
矩阵
参数
存储计算机程序
组合模块
速度
堆叠层
终端
元素
系统为您推荐了相关专利信息
数据预测方法
气象站
数据预测装置
站点
损失函数优化
产量预测方法
保护数据隐私
森林模型
样本
客户端结构
文本生成方法
文本生成模型
语义
EM算法
编码器
行人摔倒检测方法
面向巡检机器人
GCN模型
节点
数据