大语言模型的评估方法、装置和计算机设备

AITNT
正文
推荐专利
大语言模型的评估方法、装置和计算机设备
申请号:CN202410771077
申请日期:2024-06-14
公开号:CN118535443A
公开日期:2024-08-23
类型:发明专利
摘要
本申请涉及人工智能领域,具体公开了一种大语言模型的评估方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。所述方法包括:获取预设的多个功能维度的采集数据以及待评估的大语言模型;其中,所述多个功能维度至少包括语言理解、计算能力和推理逻辑;分别将所述多个功能维度的采集数据输入到待评估的大语言模型中,得到所述采集数据分别对应的预测结果;将所述预测结果与对应功能维度的采集数据的参考结果进行对比,得到所述预测结果对应的维度评分;根据所述待评估的大语言模型的各功能维度的预测结果对应的维度评分,得到所述待评估的大语言模型的综合评分。采用本方法能够提高大语言模型评估的准确性和可靠性。
技术关键词
文本 大语言模型 网络资源数据 计算机设备 计算机程序产品 分子 可读存储介质 数据获取模块 字符 处理器 评估装置 逻辑 实体 存储器 策略 子模块
系统为您推荐了相关专利信息
1
对话式数据分析方法、装置、存储介质及电子设备
自然语言文本 数据分析方法 数据分析装置 语义数据模型 指标
2
视频帧提取方法、装置、设备及介质
视频帧提取方法 卷积特征提取 关键帧 注意力 计算机设备
3
基于潜水灯的潜水告警方法、装置、计算机设备和介质
潜水灯 告警方法 数据滤波算法 判断算法 监控设备
4
手势识别方法、装置、计算机设备、存储介质和计算机程序产品
深度图像数据 分类网络 手势识别方法 矫正模型 空间结构特征
5
腹膜疾病风险预测方法、系统、电子设备及存储介质
医疗影像数据 影像特征数据 形态 疾病风险预测方法 注意力
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号