一种基于多光谱图像的目标检测和材质识别方法及系统

本发明公开了一种基于多光谱图像的目标检测与材质识别方法，包括如下步骤：步骤1、搭建成像系统，并应用成像系统获取RGB图像和灰度图像；步骤2、RGB图像和灰度图像中的目标图像进行对齐；步骤3、使用数据标注平台对标注出RGB图像中目标的精确轮廓；步骤4、将标注有精确轮廓的RGB图像和灰度图像作为输入通过一个预训练的深度学习目标检测网络得到目标轮廓信息和目标类别；步骤5、将灰度图像和目标轮廓信息作为输入通过一个预训练的材质识别网络识别目标材质类型；步骤6、将深度学习目标检测网络和材质识别网络进行融合得到目标检测与材质识别一体网络；步骤7、应用完成训练的目标检测与材质识别一体网络同时完成目标类别和材质类别的识别。