摘要
本发明属于自然语言处理技术领域,提供了多维置信度融合的大语言模型不确定性评估方法及系统,设计了一种多维置信度建模机制,能够在不依赖外部知识库的前提下,从大语言模型生成过程中的内部信息出发,实现对输出内容可靠性的有效判别。系统在语义聚类机制的基础上,创新性地引入了Token级别的多维置信度建模方法,构建了融合概率集中性、上下文扰动敏感性、生成一致性与语言合理性等要素的评分体系,可从Token层面评估模型输出中各部分内容的置信度结构,显著提升了系统对生成过程中不确定性差异的辨别能力。
技术关键词
不确定性评估方法
语义
聚类机制
自然语言
修复机制
处理器
评估装置
序列
建模方法
采样模块
高温度
策略
计算机设备
可读存储介质
关系
存储器
基准
代表