摘要
本发明提供一种3D数字人动作序列的生成方法、装置、电子设备及存储介质。接收3D数字人的第一多模态数据,第一多模态数据包括语音数据;将第一多模态数据输入训练好的肢体动作生成模型,以生成3D数字人的动作序列;其中,肢体动作生成模型的训练集包括第一多模态数据样本和对应的动作序列样本。本发明将包括语音数据的多模态数据输入肢体动作生成模型,以生成3D数字人的动作序列。相比于现有技术使用语音动画合成技术生成3D数字人的动作序列,生成的动作序列质量更好,所驱动的3D数字人在全身协调性、动作流畅性、动作合理性、人物美观性等多个方面表现更优。
技术关键词
多模态
序列
视频生成方法
驱动方法
训练集
样本
非暂态计算机可读存储介质
语音特征
噪声数据
身体
语音识别模型
电子设备
处理器
计算机程序产品
网络架构
生成装置
解码
系统为您推荐了相关专利信息
智能监测平台
访问控制机制
管控方法
负载均衡算法
关键帧