一种基于多层次知识关联的多模态知识图构建方法、装置

本发明公开了一种基于多层次知识关联的多模态知识图构建方法、装置。该方法包括如下步骤：S1、获取图片和文本数据；S2、根据单个图片构建图像节点；根据单个文本数据中单个段落中的句子之间的词共现度构建单个段落的递归树，计算两颗递归树中同一层的节点之间的距离，从而计算段落和段落之间的整体距离，以此构建单个文本数据的文本节点；S3、计算每个文本节点和每个图像节点的关联分数R，若关联分数R大于第一阈值则进行连边，否则不连边，从而构建多模态知识图。本方法从原始互联网数据开始，抽取段落文本，并通过合并类似的段落文本来构建单个文本节点，构建轻量级的多模态知识图，降低构建复杂度。