一种训练数据有效性评估方法、系统及装置

AITNT
正文
推荐专利
一种训练数据有效性评估方法、系统及装置
申请号:CN202411481596
申请日期:2024-10-23
公开号:CN119441805A
公开日期:2025-02-14
类型:发明专利
摘要
本发明提供一种训练数据有效性评估方法、系统及装置,所述方法包括:获取训练集,所述训练集为从待评估数据中均匀降采样所得;获取测试集,所述测试集包括至少1个基准测试集和至少1个关联测试集;用所述训练集训练一个探针模型;用所述测试集对所述探针模型进行测试,记录测试指标;根据所述测试指标作观测图,所述作观测图包括:以基准测试集测试指标为横轴、关联测试集测试指标为纵轴建立直角坐标系;根据所述测试指标在所述直角坐标系中画出关键点;根据所述观测图对待评估数据做出有效性评价。本发明的优点在于:可以用很低的算力,迅速给出数据有效性评估,能提高模型研发迭代效率,尤其是对前沿的复杂模型,增益更明显。
技术关键词
探针 有效性 关键点 训练集 梯度下降法 指标计算方法 测试模块 数据 梯度下降算法 基准 纵轴 横轴 计算机程序产品 处理器 评估装置 评估系统 阶段
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号