基于多模态交互的智能虚拟助手实时情感反馈方法及系统

本发明涉及一种基于多模态交互的智能虚拟助手实时情感反馈方法及系统，属于情感交互技术领域。其中，该方法包括获取多模态交互流数据，通过信号对齐处理所述多模态交互流数据得到多模态同步交互流数据；通过并行多模态特征提取处理所述多模态同步交互流数据得到多模态情感相关特征向量；通过情感状态推断处理所述多模态情感相关特征向量得到细粒度情感状态向量；通过情感反馈处理所述细粒度情感状态向量得到智能虚拟助手实时情感反馈响应信息，实现多模态交互的智能虚拟助手实时情感反馈。