基于多模态融合的VR情感识别与响应系统及方法

本发明公开了基于多模态融合的VR情感识别与响应系统及方法，基于多模态融合的VR情感识别与响应系统包括数据采集模块、数据预处理模块、特征提取模块、DCCA网络模块、情感识别模块和响应生成模块，数据采集模块用于实时捕捉用户的肢体语言特征信号、口头语言特征信号和生物特征信号，数据预处理模块用于对数据采集模块采集的数据进行预处理，特征提取模块用于提取经数据预处理模块处理后数据的关键特征，DCCA网络模块用于学习不同模态数据间的深度关联，保证情感表示的一致性和完整性。与现有技术相比，本发明的基于多模态融合的VR情感识别与响应系统及方法均实现了对用户情感状态的精准识别，显著提升了非遗VR体验的情感互动性和个性化程度。