大模型评测方法、系统、介质与设备

本发明公开了一种大模型评测方法、系统、介质与设备，涉及大模型测试领域，包括：获取动态评测文本数据集；对动态评测文本数据集进行文生图，得到动态评测图片集；对动态评测图片集进行数据质量管控，得到中间动态评测图片集；为中间动态评测图片集中的图片生成问题选项，得到动态评测数据集。本发明保证了性别公平性得分的真实可靠。本发明保证了构建出的动态评测数据集的高质量和随机性，有效避免了待评测的大模型根据静态评测数据集进行针对性训练或者由于数据与模型的随机性导致的评测结果的不稳定。