摘要
本发明提供一种文本生成模型评估方法和装置,应用于自然语言处理技术领域。该方法包括:获取测试数据,所述测试数据包括实体属性和实体类别;根据所述测试数据生成多个测试任务,一个测试任务对应多个测试问题;将所述多个测试任务的测试问题分别输入文本生成模型,得到对应的测试结果,并根据所述测试结果确定所述文本生成模型对本体知识的掌握程度;其中,所述多个测试任务包括实体类别‑层级记忆测试、实体类别‑层级应用测试、实体属性记忆测试以及实体属性应用测试。
技术关键词
文本生成模型
实体
层级
记忆
非暂态计算机可读存储介质
处理器
计算机程序产品
评估装置
自然语言
定义
模块
存储器
场景
电子设备
对象
关系
系统为您推荐了相关专利信息
声纹识别模型
会议记录方法
语音识别模型
发言者
文本
网络控制方法
网关
网络连接配置
三元组
虚拟机实例
网络防御方法
网络上下文信息
诱饵
策略
时序特征
诊疗方法
知识图谱查询
诊疗装置
融合知识图谱
关联分析算法