摘要
本发明公开了一种基于深度学习的数据标准化多层级智能映射方法及系统,方法包括以下步骤:动态构建多源标准库,通过基于网络爬虫的行业标准采集模块收集最新标准,并利用冲突检测算法处理不同标准间的冲突;采用三级智能映射决策模型,依次从字段级、结构级、语义级对输入数据进行逐层验证;通过微调后的DeepSeek模型解析语义歧义,并基于置信度动态阈值生成映射建议;将人工修正数据反馈至模型进行增量训练,优化映射精度。本发明借助基于网络爬虫的采集模块与企业标准解析模块,利用冲突检测算法维护标准库的准确性,解决了传统标准库更新滞后的问题,能确保数据映射精准,避免因标准滞后产生错误,保障数据处理的准确性和时效性。
技术关键词
映射方法
层级
更新模型参数
随机梯度下降
广度优先搜索算法
结构化数据格式
动态
数据治理平台
语义
子模块
爬虫
注意力机制
逻辑回归模型
HTTP请求
数据表结构
企业
行业术语
系统为您推荐了相关专利信息
深度图超分辨率
高分辨率深度图
特征提取模块
重构方法
重构模型
测试数据处理方法
层级
风电机组
低密度
异常数据
大语言模型
规则知识库
自动化码头
异常识别方法
数据采集中心
应急控制系统
全景影像数据
机器人仿真
环境感知数据
激光雷达数据