摘要
本发明公开了缺陷检测的方法与系统,提高准确性和效率,减少误判和漏判。其技术方案为:输入文本和图像到多模态融合编码器,获取文本特征向量和图像块令牌;采用并行的两个路径处理图像块令牌,提取特征与定位异常区域,获得预测结果特征图与像素预测结果;通过残差连接与双线性插值将不同尺度的特征融合,得到粗糙分割结果,进行二值化处理,生成掩码;识别出框和点,将所识别的框和点并输入到掩码分割网络内,生成细化掩码与置信度分数;将粗糙分割结果与细化掩码融合,得到细粒度分割结果;输入标准物件图作为模板与待检测图片进行模板匹配,对匹配区域进行差值处理,二值化并提取疑似缺陷区域;将疑似缺陷区域与细粒度分割结果融合。
技术关键词
文本特征向量
图像块
双线性插值
令牌
注意力机制
缺陷检测方法
编码器
网络
像素
模板
矩阵
视觉特征
模块
处理器
实时编码
多模态
多尺度
图片
系统为您推荐了相关专利信息
动作生成方法
音频特征提取
网络模型训练
生成动作
计算机设备
医疗健康信息
循环神经网络算法
互联网
关键词
邻域
递归神经网络
节点
事件触发词
Softmax函数
解析器
压力智能控制
数据处理中心
多变量时间序列预测
控制执行模块
数据采集模块