多模态融合缺陷检测方法及系统

本发明公开了多模态融合缺陷检测方法及系统，属于智能检测与机器视觉技术领域，包括可见光传感器、热红外传感器、高光谱传感器、多波段光源触发控制系统、模态预处理与对齐模块，跨模态特征融合模块，缺陷检测与输出模块。本发明使用三种传感器构建多模态视觉感知体系，并通过多波段光源触发控制系统完成图像获取；多模态信息经模态预处理与对齐模块进行预处理与跨模态对齐后，经由跨模态注意力模块与多尺度特征融合金字塔结构实现多模态融合，最后通过缺陷检测与输出模块进行缺陷识别与输出。不仅能显著提升缺陷识别精度，尤其对于低对比度、早期隐性裂纹类缺陷具有明显优势，同时具备良好的可扩展性与部署适配性。