摘要
本发明公开的一种基于多模态教师与学生框架的玻璃缺陷检测算法,包括从玻璃生产线上收集大量无缺陷的样本和少量带有各类缺陷的样本,并进行清洗处理,得到不同模态信息,不同模态信息包括玻璃样本图像与文本描述样本;基于玻璃样本图像与文本描述样本生成训练集与测试集,基于训练集对模型进行训练,得到多模态教师与学生网络训练模型;基于测试集对多模态教师与学生网络训练模型进行测试,基于测试结果动态调整模型参数,得到最终的多模态教师与学生网络训练模型;基于最终的多模态教师与学生网络训练模型生成玻璃缺陷检测结果;本申请多模态无监督框架具有更强的泛化性。
技术关键词
玻璃缺陷检测方法
教师
学生
多模态
文本
网络
玻璃生产线
训练集
补丁
图像制作方法
注意力
框架
编码器
训练样本图像
重构