基于多模态知识注入和单模态标签生成的多模态情感分析方法、装置、设备、介质及程序产品

本发明提供一种基于多模态知识注入和单模态标签生成的多模态情感分析方法、装置、设备、介质及程序产品，涉及人工智能技术领域。该方法包括：获取多模态数据；其中，所述多模态数据至少包括视频数据、文本数据和音频数据；将所述多模态数据输入多模态情感预测模型进行处理，输出情感预测结果。本发明实施例有效缓解现有技术的数据集中单模态标签缺失问题，通过设计一种多模态情感预测模型，不仅能够准确的对多模态数据进行情感分析，并预测出精确的情感预测结果，还能优化单模态与多模态的匹配关联度，提升单模态判别能力，增强了模型的泛化能力。