文本评测集的构建方法、构建装置、电子设备及介质

AITNT
正文
推荐专利
文本评测集的构建方法、构建装置、电子设备及介质
申请号:CN202411743394
申请日期:2024-11-30
公开号:CN119670888A
公开日期:2025-03-21
类型:发明专利
摘要
本公开涉及文本评测集的构建方法、构建装置、电子设备及介质。所述方法可以通过收集原始基础文本信息,基于原始基础文本信息构建混淆文本信息;基于预设规则对所述原始基础文本信息中的公共信息进行修改,得到更新后的基础文本信息;将混淆文本信息随机置入所述更新后的基础文本信息中,得到扩展文本信息;利用大预言模型LLM算法对所述扩展文本信息和更新后的基础文本信息的格式和内容进行确认,当确认结果满足要求时,将所述扩展文本信息添加到所述文本评测集。本公开所述方法及相关设备能够支持256k tokens及以上长度的语言能力测试,提升对大语言模型等算法的长文本处理能力进行衡量的效率和准确性。
技术关键词
文本 大语言模型 基础 格式 电子设备 可读存储介质 预定算法 处理器 模块 存储器 计算机 元素 答案 定义
系统为您推荐了相关专利信息
1
一种障碍物的定位方法、装置、电子设备及可读存储介质
车载雷达 坐标系 回波 定位方法 障碍物轮廓
2
一种用于保险服务的文本推理方法、装置、设备及介质
文本推理方法 节点 层级 推理装置 可读存储介质
3
定位请求的控制方法、装置、电子设备、存储介质及芯片
无线信标 控制移动设备 运动 周期 无线设备
4
工单的审核方法、装置、存储介质
审核模型 审核方法 样本 误差 处理器
5
基于领域泛化和图神经网络的多模态情感识别方法及系统
情感识别方法 节点特征 语音特征 文本 训练特征
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号