摘要
本公开提供了一种基于人工智能的虚拟人设计与应用平台及方法、设备,涉及虚拟数字人技术领域。该方法包括:在用户设备上对多模态输入数据进行本地匿名化,将生成的匿名化多模态特征进行编码得到多模态特征向量,并将多模态特征向量输入情感计算模型得到用户情感强度量化值;将多模态特征向量输入上下文感知模型,并结合知识图谱生成上下文修正后的用户意图向量;根据用户情感强度量化值和用户意图向量生成更新后的人格参数矩阵;基于人格参数矩阵输出语音波形数据、面部肌肉运动参数和骨骼关节坐标数据,并驱动虚拟数字人三维模型进行实时渲染。本方案能够提升虚拟数字人交互的自然度、情感共鸣及长期用户留存率,保护用户隐私数据安全。
技术关键词
多模态
模态特征
长短期记忆网络
时序特征
意图
三维模型
数据
文本特征向量
图像特征向量
参数
语音情感分析
文本情感分类
面部表情识别
编码器
矩阵
计算机可读指令
关节
波形
系统为您推荐了相关专利信息
代码解释器
历史会话
大语言模型
代码更新方法
错误码
卫星遥测数据
机器可读指令
异常数据
节点
门控循环单元
情感识别方法
集成特征
多标签分类器
融合特征
加权特征
多模态深度学习
B型钠尿肽
医院心内科
患者
左心室射血分数