基于局部信息增强的多模态伪造新闻检测方法及系统

本发明公开了基于局部信息增强的多模态伪造新闻检测方法及系统，方法包括：过图像编码器、文本编码器及局部伪造信息编码器分别提取新闻的图像特征、文本特征及局部伪造特征；随后利用细粒度对比对齐模块实现多模态特征对齐，并通过多模态特征融合模块获得融合特征；基于该融合特征，伪造新闻检测器完成真假判断、伪造类型识别与文本伪造区域定位等任务，并结合大语言模型生成定性分析结果。本发明通过引入局部伪造信息编码器、细粒度对比对齐模块和多模态特征融合模块，并结合大语言模型，实现对伪造新闻的多维度精准检测与定性分析。