摘要
本发明公开了一种基于多模态特征自适应融合的虚假新闻检测方法(MAFAN),该方法首先采用BERT提取文本特征,ViT提取图像视觉特征,并设计基于小波特征增强卷积的多分支特征提取网络提取图像的频域信息。采用双阶段融合结构,首先融合文本与频域特征,再与图像特征进一步融合。每阶段设主导与辅助模态实现跨模态交互。引入全局门控机制实现模态间权重的自适应分配,根据各模态特征的语义贡献动态计算融合权重,最终融合特征通过门控机制自适应生成,实现模态间重要性权重的动态调整。该机制增强了模型对多模态信息的适应能力与判别能力,显著提升了虚假新闻检测的准确性与鲁棒性。
技术关键词
频域特征
融合特征
多模态特征融合
图像视觉特征
文本
注意力
小波特征
特征提取网络
分类器
跨模态
多尺度特征提取
语义特征
BERT模型
机制
分支
图像特征提取
系统为您推荐了相关专利信息
类别预测模型
特征提取单元
特征提取模块
融合特征
数据
文本分类模型
文本内容特征
融合特征
训练集
结构特征提取