基于细粒度多源知识增强的多模态事实核查方法及系统

本发明公开一种基于细粒度多源知识增强的多模态事实核查方法及系统，属于信息检测技术领域。所述方法包括：获取推文信息和证据信息；从推文信息和证据信息中抽取细粒度的知识信息；提取推文信息、证据信息和知识信息的文本信息语义隐表示和图片信息语义隐表示；基于文本信息语义隐表示和图片信息语义隐表示，构建包含所述推文信息、所述证据信息和所述知识信息的异质图；基于图注意力网络计算所述异质图的新结点表示；对所述异质图的新结点表示进行分类，得到所述推文信息的多模态事实核查结果。本发明可以对推文的真实性进行更准确地预测。