模型评估方法、装置、设备及介质

AITNT
正文
推荐专利
模型评估方法、装置、设备及介质
申请号:CN202411369927
申请日期:2024-09-29
公开号:CN118886430B
公开日期:2024-12-27
类型:发明专利
摘要
本公开实施例涉及一种模型评估方法、装置、设备及介质,该方法包括:确定候选测试集组;其中,候选测试集组与测试领域一一对应,候选测试集组包括不同难度等级的多个候选测试集;基于多个候选测试集对待测模型进行测试,得到测试结果;将与待测模型难度相匹配的测试结果确定为目标测试结果,将目标测试结果对应的候选测试集作为目标测试集;根据目标测试集对应的难度等级,确定待测模型在测试领域下与对应的难度等级相匹配的评估结果。本公开实施例,避免了模型对单一题目的回答不确定性对评估结果的影响,从领域的针对性以及评估的稳定性等多方面提高了最终确定的评估结果的准确性。
技术关键词
模型评估方法 文本 标签 正确率 语义 对象 评估装置 电子设备 测试模块 处理器 可读存储介质 指令 存储器 标记 基础 计算机
系统为您推荐了相关专利信息
1
基于原型驱动的双视角协同对比融合网络的机械故障诊断方法
机械故障诊断方法 原型 互补特征 样本 视角
2
一种含有多段文本的文档内容可信度评价方法
可信度评价方法 文本情感分类器 文本情感分类模型 文本段落 自然语言分词
3
数据处理方法、数据处理装置和可读存储介质
数据交互装置 数据处理方法 数据处理装置 日志 信号
4
一种基于联合域适应的轴承剩余使用寿命预测方法及系统
剩余使用寿命预测 特征提取器 退化特征 构建预测模型 度量
5
生成内容的评估方法、装置、介质、设备及产品
推理机制 语句 计算机程序指令 存储计算机程序 模块
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号