一种基于社会背景的虚假短视频新闻检测方法及系统

本发明提供一种基于社会背景的虚假短视频新闻检测方法及系统，涉及虚假短视频新闻检测技术领域，包括基于各模态检测模型提取待检测短视频新闻的多模态特征，视频特征包括文本、音频、关键帧、连续帧特征，社会信息特征包括评论和用户特征；基于两个多尺度融合模块分别融合多模态特征中的视频特征向量和社会信息特征向量；基于交叉注意力机制关联视频特征向量和社会信息特征向量，得到跨模态交互特征向量；跨模态交互特征向量经transformer模型分类，得到真实新闻视频和虚假新闻视频的预测概率结果。本发明融合多模态特征，并利用交叉注意力机制和多尺度卷积增强新闻内容表示，关联社会背景模态与其他模态，提升检测效果。