针对大模型的智能评测方法、设备及介质

本申请公开了针对大模型的智能评测方法、设备及介质，涉及大模型领域，方法包括：获取被测模型、裁判模型、对标模型，进行评分定义，进行第一提示词的维护；获取用户基于评分定义的自定义评测信息；根据自定义评测信息，基于预设的评测集中的评测问题，对被测模型、对标模型分别进行提问，分别得到对应的第一输出答案、第二输出答案；通过裁判模型对被测模型进行智能评测。通过裁判模型辅助决策，根据各评测问题进行智能评分，并提供评分依据，生成智能评测结果，辅助人工的决策评分，设置了完整的评测标准，保证了评测过程中的一致性和复杂性降低，同时保证了评测结果的公平性和可靠性。