摘要
本申请提供了一种基于AI交互信息的数字人生成方法及系统,本申请根据面部采集数据进行实时情绪特征提取,并根据实时情绪特征生成数字人虚拟形象的第一面部动态化图像;根据用户的历史情绪特征进行情绪轨迹预测,得到初始情绪预测轨迹,根据历史弹幕交互信息和历史情绪特征提取情绪影响因子,采集弹幕分布时间窗口,基于弹幕分布时间窗口、情绪影响因子和初始情绪预测轨迹生成数字人虚拟形象的第二面部动态化图像;基于第一面部动态化图像、第二面部动态化图像进行融合决策,生成数字人动态形象并用于直播推送,能够面向观众反馈对数字人面部情绪进行动态调整,提高了数字人表达的真实性与交互性。
技术关键词
生成数字人
情绪特征
面部
多模态交互
图像生成单元
生成方法
计算机终端设备
轨迹
图像生成模型
因子
生成用户
模态特征
多维特征向量
序列
生成弹幕
动态
特征提取网络
模糊决策