基于多模态数据融合的情感交互方法及装置

本申请公开了一种基于多模态数据融合的情感交互方法及装置，具身智能设备方法包括：通过集成在具身智能设备的传感器阵列实时采集并预处理多模态数据，得到时间对齐的多模态特征；将多模态特征输入预设跨模态因果推理引擎，输出用户的当前情感状态标签、导致出现当前情感状态标签的当前因果因素，预设跨模态因果推理引擎用于执行当前情感状态标签分析和事件归因分析；基于当前情感状态标签、当前因果因素，查询预设情感行为因果映射库，得到最优的情感交互策略指令集，预设情感行为因果映射库是由历史情感状态标签、历史因果因素以及历史验证有效的历史交互策略共同组成的。采用本申请，可提升情感识别准确性，同时提升具身智能设备的决策准确度。