一种基于大模型的数据质量检测方法及系统

AITNT
正文
推荐专利
一种基于大模型的数据质量检测方法及系统
申请号:CN202411893416
申请日期:2024-12-20
公开号:CN119829965A
公开日期:2025-04-15
类型:发明专利
摘要
本发明公开一种基于大模型的数据质量检测方法及系统。所述基于大模型的数据质量检测方法,包括以下步骤:S1:获取待检测数据;S2:对所述待检测数据进行预处理,提取数据特征;并将数据分为训练集、验证集和测试集,为后续模型训练做好准备;S3:选择适合的数据质量检测任务的大模型进行预训练;在训练集上对选定的大模型进行微调,以适应特定的数据质量检测需求;S4:利用微调后的大模型对待检测的数据根据所述数据特征和预设的质量检测规则,对所述数据质量进行检测;S5:将检测结果与人工审核结果进行对比,评估大模型的准确性和有效性。本发明能够实现高效、智能的数据质量检测,降低人工成本,提升数据处理效率。
技术关键词
数据格式 时间序列特征 训练集 统计方法 数据分布 预训练模型 文本 数据一致性校验 自然语言信息 数据采集策略 闭环反馈机制 有效性 监督学习模型 正则化策略 数据输入模块 数值 一致性检测 去重算法
系统为您推荐了相关专利信息
1
一种基于多视图集成学习的呼吸音数据分类系统
数据分类系统 萤火虫算法 时间序列特征 特征提取模块 分类器
2
一种小样本学习的长序列动作识别方法
动作识别方法 特征提取器 样本 多尺度 特征提取模块
3
一种眼底超声视频最优帧检测与视神经鞘宽度测量的全自动方法
全自动方法 眼球 中心线 结构单元 超声图像分割
4
一种基于智能算法优化的空运物流运输管理系统
物流运输管理系统 智能算法优化 模拟退火算法 监测单元 多元线性回归算法
5
一种锈蚀栓钉连接件的抗剪承载力预测方法及系统
迁移学习模型 多层感知机 混凝土抗压强度 随机梯度下降 参数
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号