一种面向中文语境的多模态理解与生成评测方法、系统

本发明公开了一种面向中文语境的多模态理解与生成评测方法，涉及大模型技术领域，构建面向中国元素特征的图像和视频评测数据集；构建参考答案文本，形成参考描述集；构建参考JSON；生成理解任务测试描述；生成任务测试描述；将理解任务测试描述，利用GPT‑4模型进行结构化字段对齐以构建理解任务测试JSON；将生成任务测试描述，利用GPT‑4模型进行结构化字段对齐以构建生成任务测试JSON；计算理解任务测试JSON与参考JSON的结构化字段的相似度、生成任务测试JSON与参考JSON的结构化字段的相似度；分别引入动态加权策略并计算各自总评分。本发明还公开了一种面向中文语境的多模态理解与生成评测系统，本发明实现了建立具备语境意识、可复现的标准化评测流程。