一种多模态情感识别方法及系统

本申请涉及多模态数据处理技术领域，具体涉及一种多模态情感识别方法及系统，该方法包括：采集目标对象的音频信号、视频数据以及生理信号，分别基于各时间段内音频信号和生理信号的变化情况，确定各时间段的外在情绪波动值和内在情绪波动值，根据各时间段外在情绪波动值与内在情绪波动值之间的相关性，以及外在情绪波动值与内在情绪波动值的差异，确定各时间段的内外情绪关联度；基于各时间的内外情绪关联度的差异确定各时间段的情感真实度，以筛选有效时间段，根据有效时间段内的多模态数据对目标对象的情感进行识别。本申请可提高对非生理信号数据中情感信息提取的准确性，避免对目标对象情感状态识别结果的影响。