一种基于多模态的设备缺陷检测方法及设备

本发明公开了一种基于多模态的设备缺陷检测方法及设备，涉及设备检测领域，现有的设备缺陷检测效率低且结果不准确。本发明包括步骤：获取目标设备的可见光图像和非可见光图像；对可见光图像进行特征提取得到可见光图像特征，以及对非可见光图像进行特征提取得到非可见光图像特征；基于特征融合模型将可见光图像特征和非可见光图像特征进行特征融合，得到多模态融合特征；其中，特征融合模型基于对多个特征融合单元的组合进行评估得到；基于多模态融合特征确定目标设备的缺陷检测结果。本技术方案结合可见光图像与非可见光图像的信息优势，有效提高缺陷检测的准确性和全面性，使得对目标设备缺陷的检测更为精准可靠。