一种多模态实体对齐方法、设备及介质

本发明涉及知识图谱领域，公开了一种多模态实体对齐方法、设备及介质，包括：获取两个多模态知识图谱的数据，对相应数据进行预处理，得到预处理后的数据；构建包含模态自适应噪声增强机制的多模态编码器，通过高斯噪声注入增强多模态数据的表达能力，并输入预处理后的数据至多模态编码器，得到增强的多模态嵌入特征；对增强的多模态嵌入特征计算单模态置信度和联合置信度，得到模态权重；通过相对校准策略，根据模态不确定性调整融合模态权重，降低泛化误差上界；获得多模态联合嵌入，结合模态内和模态间对比损失进行实体对齐；本发明解决了多模态实体对齐方法中因模态质量差异、噪声以及模态间的不一致性、异构性导致的错误对齐的技术问题。