摘要
本公开实施例涉及一种模型测试方法、装置、设备及介质,其中该方法包括:基于基础数据集中的标准答案构建测试题目;基于测试题目以及提示词模板,构建测试数据集;获取目标模型,并将测试数据集中的提示词输入目标模型得到对应的待测答案;对待测答案进行单元测试,确定单元测试结果;基于单元测试结果确定目标模型的模型测试结果。本公开实施例根据单元测试结果确定目标模型的模型测试结果,将单元测试结果作为目标模型的测试指标,相较于现有技术,考虑到代码处理等特殊场景的可运行特殊性,可以更加客观有效地反应模型的真实能力,极大提升模型测试的准确性。
技术关键词
模型测试方法
构建测试数据
知识点
答案
模型测试装置
测试题
模板
场景
基础
覆盖率
电子设备
处理器
输入模块
可读存储介质
指令
关系
存储器
系统为您推荐了相关专利信息
排班方法
线性规划模型
视频学习系统
数据安全管控
在线考试系统