摘要
本发明公开了一种基于聚类引导梯度对比学习的多模态空间域鉴定方法,包括步骤一、构建数据集;步骤二、构建多模态空间域鉴定模型;步骤三、利用数据集训练所述多模态空间域鉴定模型,得到多模态表征,并使用无监督聚类方法mclust聚类得到空间域鉴定结果。本发明通过调整样本和不同簇心之间的距离,增加同簇样本之间的语义一致性与不同簇样本之间的差异性;并设计了模态间注意力融合模块,根据不同模态数据的信息量调整其权重,实现多模态特征的自适应融合,提升了提升空间域鉴定的质量,具有较好的鲁棒性。
技术关键词
K近邻方法
样本
无监督聚类方法
预训练模型
解码器
空间位置关系
编码器
多模态特征
语义
数据处理方法
模块结构
注意力
图像
节点特征
系统为您推荐了相关专利信息
组织病理学图像
分割方法
原型
无标签样本
无标签数据