摘要
本发明提供一种生成式文本摘要模型的一致性评估方法及系统,涉及软件工程技术领域,方法包括:选择原始文档,以原始文档作为生成式文本摘要模型的输入,输出原始摘要,设置生成式文本摘要模型的蜕变关系,根据原始文档,利用蜕变关系,构建衍生文档,以衍生文档作为生成式文本摘要模型的输入,输出衍生摘要。构建摘要一致性度量指标,以摘要一致性度量指标为计算对象计算原始摘要与衍生摘要之间的整体一致性分数,根据摘要一致性分数,对生成式文本摘要模型的一致性进行评估。本发明提供了生成摘要的一致性评估方法,提升了摘要一致性度量的可靠性,减少了对人工标注的数据集的依赖。
技术关键词
文本摘要模型
蜕变关系
计算机可读指令
度量
软件工程技术
指标
语义
评估系统
存储器
因子
处理器
对象
实体
标记
序列
频率
数据