一种基于图网络引导的医学图像信息对齐方法、设备及介质

本发明提供一种基于图网络引导的医学图像信息对齐方法、设备及介质，属于医学图像处理技术领域，提取多模态表征；将单一模态的特征图转换为完全图并利用图神经网络的信息传递和聚合特性；再通过更新边权重和去除低质量边和节点，得到多个包含重要对象的子图；构建跨模态图；基于patch级别配置交叉注意力机制，实现patch级别的信息匹配，查到不同医学图像之间的差异化；定义内部学习核函数和外部学习核函数；计算两个样本对在高维空间的距离，再利用所述距离进行聚类分析。本发明使得模型对于重要对象的关注以及多模态匹配方式更加符合人类的思维模式．同时引入交叉注意力机制实现更加细粒度信息的对齐。