一种模型测试方法、装置、设备及介质

AITNT
正文
推荐专利
一种模型测试方法、装置、设备及介质
申请号:CN202410788714
申请日期:2024-06-18
公开号:CN118733450A
公开日期:2024-10-01
类型:发明专利
摘要
本公开实施例涉及一种模型测试方法、装置、设备及介质,其中该方法包括:基于基础数据集中的标准答案构建测试题目;基于测试题目以及提示词模板,构建测试数据集;获取目标模型,并将测试数据集中的提示词输入目标模型得到对应的待测答案;对待测答案进行单元测试,确定单元测试结果;基于单元测试结果确定目标模型的模型测试结果。本公开实施例根据单元测试结果确定目标模型的模型测试结果,将单元测试结果作为目标模型的测试指标,相较于现有技术,考虑到代码处理等特殊场景的可运行特殊性,可以更加客观有效地反应模型的真实能力,极大提升模型测试的准确性。
技术关键词
模型测试方法 构建测试数据 知识点 答案 模型测试装置 测试题 模板 场景 基础 覆盖率 电子设备 处理器 输入模块 可读存储介质 指令 关系 存储器
系统为您推荐了相关专利信息
1
基于住院医师规范化培训的智能化排班方法、系统及介质
排班方法 线性规划模型 视频学习系统 数据安全管控 在线考试系统
2
教材生成方法、装置、存储介质及电子设备
知识点 集群 电子教材 生成方法 标识
3
对话问答方法、装置、设备及存储介质
对话问答方法 文本生成模型 答案 词语 分词
4
基于文本属性图生成答案的方法及装置
节点 大语言模型 生成答案 文本 计划
5
一种基于大模型的语音交互安全知识问答方法、装置、存储介质及电子设备
知识问答方法 语音 知识点 语义 控件
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号