摘要
本发明公开了一种基于智能感知与情感调控的数字人矛盾纠纷调解方法,首先获取矛盾双方的语音信息及视觉信息;然后利用语音信息计算语音情绪分数,利用视觉信息计算视觉情绪分数,加权计算得到综合情绪得分;随后生成数字人的初始语速、初始表情和初始手势;接着从知识库中匹配适合的应答策略并传输至数字人;最后将语音情绪分数中的语音信息映射到语音合成参数,并结合应答策略生成与矛盾纠纷双方语种一致的情感化语音信号由数字人输出进行矛盾纠纷调解。调解过程中数字人实时监测综合情绪得分和矛盾场景进行动态调整。本发明基于智能感知准确捕捉用户的真实情绪状态,并基于情感感知进行情感调解,提升了数字人交互的真实感和用户信任度。
技术关键词
调解方法
手势
多模态数据采集
策略
骨骼关键点
视觉
语音采集设备
计算机程序指令
面部关键点检测
语种识别技术
生成数字人
语义关键词
动态
匹配模块
调解系统
处理器
文本