一种模型评测方法、装置、设备及介质

AITNT
正文
推荐专利
一种模型评测方法、装置、设备及介质
申请号:CN202411027113
申请日期:2024-07-29
公开号:CN120578915A
公开日期:2025-09-02
类型:发明专利
摘要
本公开实施例涉及一种模型评测方法、装置、设备及介质,其中该方法包括:获取多个待测模型以及历史评测结果;基于所述多个待测模型以及历史评测结果生成多个评测任务,其中,每个评测任务定义两个待测模型进行对比评测;对多个评测任务生成对应的多个评测数据;将多个评测数据分发给评测用户进行评测,得到多个评测任务对应的多个单评测结果;基于多个待测模型的初始分数以及多个单评测结果采用对弈水平评分方式确定多个待测模型的当前分数;根据多个待测模型的当前分数确定模型排序结果。本公开提升了模型评测的效率和易用性,并且不同模型通过权威性以及准确性较高的对弈水平评分方式进行排序确定,提升了排序结果的可靠性和准确性。
技术关键词
模型评测方法 评测装置 数据模块 电子设备 处理器 定义 页面 可读存储介质 指令 存储器 控件 计算机 视频
系统为您推荐了相关专利信息
1
基于多候选仲裁的大模型数据标注方法、装置及存储介质
多级特征 业务规则库 数据标注方法 联合损失函数 语义
2
基于离轴衍射的反射式叠层成像方法及相关装置
反射式叠层成像 探针 迭代算法 图像 反射式样品
3
图元网格的生成方法及其相关装置
网格 图元 图纸 车道 房间
4
机器人零位恢复方法、电子设备及存储介质
姿态偏差 恢复方法 故障机器人 相机 坐标系
5
细粒度多维配置的权限控制方法、系统、设备及介质
Apriori算法 权限控制方法 结构层次关系 组织 置信度阈值
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号