基于多模态互校准的无监督缺陷检测方法、系统及介质

本发明公开了一种基于多模态互校准的无监督缺陷检测方法、系统及介质，所述方法包括以下步骤：提取RGB图像数据和3D点云数据的原始2D特征和原始3D特征；基于模态投影层对原始2D特征和原始3D特征分别进行相互投影，得到投影后特征；根据原始2D特征、原始3D特征以及投影后特征进行相互校准；设置重构解码器对相互校准过程进行优化；设置组合训练损失对模态投影层和重构解码器进行优化；提取待测样本的原始特征；基于训练后的模态投影层获取原始特征的投影特征；根据待测样本的原始特征和投影特征间的差异性，判断待测样本的缺陷情况；本发明能够在无需标注的情况下，结合2D和3D信息进行缺陷检测，提高了检测精度和应用范围。