一种基于多模态情感感知的智能对话控制方法及相关装置

本发明公开了一种基于多模态情感感知的智能对话控制方法及相关装置，其方法包括：智能外呼机器人一体机进入智能对话监控模式，对当前环境下的目标用户的语音音频数据进行对话监控处理，获得对话监控结果；基于对话监控结果进入对话模式，并对语音音频数据进行语音情感识别处理，获得语音情感数据；对语音音频数据进行语义分析处理，获得语义信息数据；基于语音情感数据以及语义信息数据分析获得情绪状态数据；索引到与情绪状态数据相对应的回应策略，并基于回应策略生成回应音频数据。在本发明实施例中，可以及时的捕捉到目标用户的情绪状态数据，并及时根据情绪状态数据以及语义信息数据生成回应音频数据进行回应，实现对目标用户的及时安抚。