摘要
本申请公开了一种自动化数据异常检测与处理方法、装置、设备及介质,涉及数据处理领域,包括:采集原始数据,并根据原始数据构建训练数据集;通过训练数据集对初始数据质量检测模型进行训练,以得到训练后数据质量检测模型;收集历史处理数据,以根据历史处理数据构建知识库,并通过预设规则引擎框架构建规则引擎,将知识库及规则引擎集成至训练后数据质量检测模型,以通过得到的目标数据质量检测模型对实时生产数据进行质量检测,以识别异常数据,并通过知识库及规则引擎生成相应的处理流程;基于处理流程生成相应的处理脚本,并执行处理脚本,以完成异常数据处理。由此,可以通过大模型自动识别异常数据,并生成相应的处理脚本,提高处理效率。
技术关键词
异常数据处理
脚本
识别异常数据
随机梯度下降
模型训练模块
集成模块
传播算法
生成系统
节点
框架
可读存储介质
处理器
措施
爬虫
电子设备
存储器
系统为您推荐了相关专利信息
风电平台
海上平台
图像识别模型
浮式平台
实时图像
框架构建方法
问答模型
问答系统
深度特征提取
个性化信息推荐
语音匹配方法
语音匹配系统
数据输入模块
数据转换模块
实时语音