摘要
本发明提供一种基于修辞结构解析和大语言模型树结构化检索方法及装置,涉及自然语言处理技术领域。该方法包括:采用修辞结构解析模型对原始长文档进行结构解析,构建语法二分树;采用大语言模型对语法二分树的节点的文本进行语义归纳,通过迭代循环机制,获得语法二分树的总结文本;构造对比学习训练样本,采用对比学习框架对预训练的BERT嵌入模型进行优化,获得优化后的BERT嵌入模型;采用基于FAISS向量检索技术,构建检索索引结构;将用户的查询输入优化后的BERT嵌入模型中进行编码,获得查询向量表示;根据查询向量表示和检索索引结构计算余弦相似度,根据相似度得分,获得检索结果。采用本发明可提高树结构检索的效果。
技术关键词
结构化检索方法
节点
模型树
语义向量
向量检索技术
文本
计算机可读取存储介质
计算机可读指令
检索设备
检索装置
索引表
大语言模型
解析单元
自然语言
机制
处理器
框架
超参数
系统为您推荐了相关专利信息
机组组合调度方法
支路有功潮流
时间段
电力系统负荷数据
神经网络模型训练
结构化查询语言
抽象语法树
数据表结构
数据血缘关系
复杂度特征
决策支持系统
分布式计算框架
决策方法
时效性
负载均衡策略
实体对齐方法
信息编码
三元组
图谱
实体对齐模型
多模态数据融合
人体拓扑结构
识别方法
特征提取网络
无人机