摘要
本发明公开了基于双向对偶耦合的数字人表情编辑方法,属于数字人表情生成领域,包括以下步骤:S1、构建双向生成对偶扩散网络,建立语音与视频模态之间的映射关系,并在正反向任务中实现协同优化与信息互补;S2、进行多层次分布偏差条件控制,分别从局部和全局优化生成特征分布;S3、实施异步双向一致性约束,动态调整正反向生成任务的损失权重与约束机制,优化语义一致性与动态表达的鲁棒性。采用上述基于双向对偶耦合的数字人表情编辑方法,利用双向模型架构深度打通模态交互通路,运用特征处理技术全方位挖掘表情要素,辅以多样化编辑机制满足多元创作需求,进而实现细腻逼真的优质表情产出。
技术关键词
表情编辑方法
表情特征
唇形特征
音频特征
视频
多层次特征
生成特征
表达式
语音信号提取
混合高斯模型
参数
个性化特征
生成表情
偏差
耦合机制
学习特征
人脸