摘要
本发明公开了一种基于跨模态提示学习的工业零样本异常检测方法及系统,涉及计算机视觉和深度学习技术领域。该方法包括:获取工业场景中包含产品缺陷与正常状态的RGB图像与点云数据,并对点云数据进行预处理;构建异常检测模型,利用异常检测模型初步提取RGB图像与点云数据的信息表征,并通过提示信息进行进一步的特征提取和语义对齐操作;基于跨模态协同机制对异常检测模型进行训练,并采用协同调制策略对训练的异常检测模型进行测试;利用训练完成的异常检测模型对待检测的产品进行异常检测。本发明在工业环境下,尤其是在数据稀缺和模态复杂条件下能够显著提升实时缺陷检测精度与鲁棒性。
技术关键词
异常检测方法
跨模态
样本
点云
损失函数优化
工业
多视角
图像编码器
生成RGB图像
可读存储介质
数据
深度图像编码
语义
双模态
异常检测系统
深度学习技术
文本编码器
三元组
分支
系统为您推荐了相关专利信息
短波天线
无线通信方法
生成坐标点
生成训练样本
功率
精准识别方法
高精度船舶
冗余特征
深度学习算法
光学遥感影像
静态源码扫描方法
代码特征
污点
漏洞数据库
深度学习模型优化
钢筋混凝土梁构件
数据增广方法
混凝土模型
裂缝
参数
假新闻检测方法
模态特征
预训练模型
文本
跨模态