摘要
本申请涉及一种基于对齐子图的多模态实体对齐方法、系统及电子设备,属于数据处理技术领域,方法包括:基于两个知识图谱中的实体及实体关系信息,通过定义对齐规则和提取对齐路径,生成实体的对齐子图;对所述对齐子图进行动态合并,对于合并后的对齐子图中的每个节点,通过聚合来自邻居节点的信息进行更新基于可解释路径的消息传递过程,进而计算对齐子图的路径评分;对所述对齐子图通过属性编码器表征实体的多模态属性,并通过对齐注意力机制表征实体对感知的多模态属性,计算对多模态知识图谱中不同实体间的属性对齐评分;最终基于实体相似度评估综合分数对齐多模态实体对。该方法能够有效地有效利用实体的多模态属性信息来提高对齐的准确性。
技术关键词
实体对齐方法
注意力机制
多模态
指示计算机执行
编码器
节点
多层感知机
计算机程序产品
动态规划方法
BERT模型
对齐系统
电子设备
图谱特征
可读存储介质
路径结构
邻居
数据处理技术