一种融合图像语义的多模态主题分类方法

本发明涉及主题分类处理技术领域，具体地说，涉及一种融合图像语义的多模态主题分类方法，用于内容审核，其步骤包括：获取含文字说明和配图的新闻内容项；提取文字特征与图片视觉特征；获得加权后的文字及图片核心特征；计算图文特征关联权重，生成图片摘要特征并与文字核心特征融合，得出表示图文语义一致程度的一致性分数；将该分数与预设阈值比较，低于阈值则判定为潜在图文误导信息，依据关联权重生成解释性报告，并高亮显示关联权重最低的图像区域与关键词。本发明通过自动量化图文一致性，精准识别误导信息，提升内容审核自动化水平和人工复核效率，对净化网络信息环境具有重要价值。