多模态社交舆情感知的需求预测系统及方法

本发明涉及大数据分析和人工智能领域，具体涉及基于多模态数据的社交舆情感知和商品需求预测系统及方法，包括：多模态－文图情感融合模块通过双通道特征提取处理文本和图像数据，生成文本特征向量和图像特征向量，并执行跨模态表征学习将两者融合为多模态－文图情感向量，预处理模块将多模态－文图情感向量与直播活动数据、商品历史销量和直播影响力数据进行融合，形成时序敏感的多模态－文图情感融合表征，需求感知模块通过多层感知机对融合表征进行自适应特征转换，生成多模态－文图融合向量，专家系统结合销量数据、标签类型和粉丝数量信息，基于决策理论对商品需求进行预测，实现了文本和图像模态特征的有效提取和双向转换。