模型评估方法、装置及计算设备

本说明书实施例提供模型评估方法、装置及计算设备，其中模型评估方法包括：获取评估用例和对应的参考结果；根据评估用例和参考结果，生成评估用例的推理需求对应的需求评估约束，其中，需求评估约束用于约束评估用例的正向因子和/或负向因子；通过待评估模型对评估用例生成待评估结果；通过评估模型基于需求评估约束，对评估用例以及对应的待评估结果进行评估处理，获得评估用例的待评估结果对应的推理质量评估结果；根据评估用例的待评估结果对应的推理质量评估结果，确定待评估模型的评估结果。对各评估用例适应其推理需求特点，自适应生成细粒度的需求评估约束，更好地泛化到各种不同类型、不同推理需求的评估用例的推理质量评估中。