摘要
本发明公开了一种大语言模型逻辑冲突检测能力的评估方法与装置,属于大语言模型技术领域,所述方法包括:根据包含逻辑冲突的本体总结逻辑冲突模式;基于逻辑冲突模式与相应本体构建正例数据集和负例数据集;将正例数据集和负例数据集分别与预先设计的多种不同类型的逻辑冲突检测提示词相结合,对大语言模型进行提问;根据对大语言模型的测试结果,对大语言模型的逻辑冲突判断与解释能力进行评估;本发明考虑了逻辑冲突的模式以及逻辑推理的规则,可更好地理解复杂的语境,提高逻辑冲突检测的准确性。
技术关键词
逻辑
概念
推理规则
模式
大语言模型
冗余
对象
定义
数据
正确率
标记
关系
度量
评估装置
测试模块
自然语言
错误率
格式
网络
系统为您推荐了相关专利信息
水军检测方法
通道注意力机制
机器人
社交媒体平台
样本
巡检机器人系统
识别模块
控制模块
故障检测单元
设备巡检