评估模型的偏差识别方法、评分方法、训练方法及设备

AITNT
正文
推荐专利
评估模型的偏差识别方法、评分方法、训练方法及设备
申请号:CN202511152433
申请日期:2025-08-15
公开号:CN120954390A
公开日期:2025-11-14
类型:发明专利
摘要
本说明书涉及大语言模型技术领域,提供了一种评估模型的偏差识别方法、训练方法、评分方法及设备;偏差识别方法中,输入至评估模型的数据包含:待评分内容以及评分辅助信息,评估模型在评分辅助信息的提示下,输出待评分内容的评分分数;方法包括:对预设的原始数据进行扰动,生成扰动数据;扰动包括:在保持评分辅助信息对评估模型的提示语义不变的前提下,变更原始数据中评分辅助信息的描述形式;将扰动数据输入至评估模型,获取评估模型输出的当前评分分数;根据扰动数据的当前评分分数以及对应于原始数据的预设评分分数,确定评估模型是否存在评分偏差。本实施例能够准确识别出评估模型是否存在评分偏差,还能够减轻评估模型的评分偏差。
技术关键词
数据 偏差 评分方法 答案 标识 识别方法 基准 语义 标签 处理器 大语言模型 指令 计算机程序产品 指标 可读存储介质 电子设备 存储器
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号