摘要
本发明公开一种烟草问答系统回答质量自动化评测方法及系统,包括:获取待评测的问答对;采用训练后的大语言模型对问答对中的问句和回答进行语义连贯性检测;对通过语义连贯性检测的问答对进行问句类型的分类,根据得到的问句类型,抽取问句和回答中的实体和属性,根据实体和属性在预先构建的标准数据库中进行对应信息的查询,以进行反向覆盖检测,从而判断回答是否正确。通过句级语义连贯性和词级信息精确性两个方面共同对回答进行评测,提升自动化评测效率和系统问答评测质量。
技术关键词
问答系统
评测方法
实体
查询物品
语义
烟碱含量
一氧化碳
指令
处理器
评测系统
语句
大语言模型
计算机程序产品
滤嘴
焦油
分析模块
可读存储介质
口感
存储器
系统为您推荐了相关专利信息
原始查询语句
查询意图
生成方法
意图类别
语义相关度
深度特征提取
语义角色
深度优先搜索算法
生成向量
语义标签