一种基于多模态图像的多任务缺陷分割方法及系统

本申请提供一种基于多模态图像的多任务缺陷分割方法及系统。其中，根据多模态图像数据构建多模态特征融合网络；利用所述多模态特征融合网络的不同分支处理不同模态的图像数据，并通过特征变换器将不同模态的图像数据对应的特征向量映射至统一特征域，以形成融合特征；基于所述融合特征，构建多任务分割网络，并通过包含已标注缺陷位置的多模态图像数据所构建的训练集对所述多任务分割网络进行训练；利用训练完成的多任务分割网络对获取的目标多模态图像进行分割，以输出所述目标多模态图像中每个像素所属的缺陷类别以及对应的置信度。本申请提供的技术方案能够有效提高缺陷检测效率。