一种基于深度学习的自动化数据清洗方法

AITNT
正文
推荐专利
一种基于深度学习的自动化数据清洗方法
申请号:CN202411485707
申请日期:2024-10-23
公开号:CN119478624A
公开日期:2025-02-18
类型:发明专利
摘要
一种基于深度学习的自动化数据清洗方法,包括:获取待清洗的图像数据集;对所述待清洗的图像数据集进行标注,得到正常图像数据集与异常图像数据集,对所述数据集进行数据增强;构建生成对抗网络模型,所述生成对抗网络模型包括生成器和判别器;使用标注的正常图像数据集和异常图像数据集进行对抗训练,训练生成最终对抗网络模型;将待检测的图像输入最终对抗网络模型,对所述待检测的图像进行异常检测,得到图像异常检测结果,基于所述图像异常检测结果采取预设不同的清洗方法。本发明通过利用生成对抗网络模型,实现对图像数据的异常检测与清洗,本发明可大幅提升数据处理效率,为复杂流程工业中的视觉应用大模型提供高质量的数据支持。
技术关键词
数据清洗方法 图像 生成对抗网络模型 异常数据 注意力机制 数据分布 工业相机 卷积神经网络结构 卷积模块 分布式存储系统 工业生产 数据管理系统 卷积技术 清洗策略 超参数 物联网设备 视觉特征
系统为您推荐了相关专利信息
1
一种公路养护道路施工顺序确定方法、系统、设备及介质
路面缺陷 路段 车道 数据 公路养护技术
2
一种基于深度学习的科技成果供需智能匹配方法
智能匹配方法 更新模型参数 引入注意力机制 样本 文本
3
一种动态自适应BEV感知的多尺度特征融合方法
特征融合方法 动态 多尺度特征融合 广角摄像头 网格
4
基于分区过滤网络的虚假新闻检测方法及系统
情感特征 谣言 文本 BERT模型 事件特征
5
一种路侧图像的地理坐标定位方法、装置及电子设备
像素点 相机 无人机载激光扫描 关系 点云
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号