摘要
本发明涉及数据处理领域,公开了一种大语言模型进行会话分析任务的批测方法、设备及介质。该方法包括:获取测试集中的会话信息;调用预先训练的大语言模型生成会话信息对应的会话小结信息;获取测试集中的期望信息,并根据期望信息和会话小结信息对大语言模型执行批测操作,得到大语言模型对应的批测结果,批测结果包括标签准确率和场景模板可用率;根据标签准确率和场景模板可用率,计算大语言模型的综合可用率。在本发明实施例中,将可充分体现模型批测结果的标签准确率和场景模板可用率进行整合,提供了简洁明了的综合可用率,以方便、直观的体现大语言模型的性能。
技术关键词
大语言模型
标签
神经网络模型
测试场景
模板
文本
筛选出合格
生成会话
可读存储介质
存储器
处理器
计算机
训练集
指令
线路
系统为您推荐了相关专利信息
频域特征
故障预测模型
故障诊断方法
局部放电故障
超声数据
多层感知机
图像变化检测方法
分类器
多级特征融合
变化检测模型