一种查询编码器的训练方法及相关装置

AITNT
正文
推荐专利
一种查询编码器的训练方法及相关装置
申请号:CN202510906086
申请日期:2025-07-01
公开号:CN120745737A
公开日期:2025-10-03
类型:发明专利
摘要
本申请公开了一种查询编码器的训练方法及相关装置,获取前k‑1轮的对话以及第k轮的查询。根据前k‑1轮的对话以及第k轮的查询,通过大语言模型进行重写,得到第k轮的目标重写查询。根据第k轮的目标重写查询,确定前k‑1轮的查询分别与第k轮的目标重写查询的相关性,得到第k轮的目标重写查询对应的历史相关查询和历史无关查询,并确定训练正样本和训练负样本,训练正样本包括目标段落文本和历史相关查询对应的段落文本。根据第k轮的目标重写查询、训练正样本以及训练负样本,通过对比学习对初始查询编码器进行训练,得到查询编码器。由此,通过大语言模型来对查询进行重写,快速获取表达信息完整的查询,更加高效地训练出较为准确的查询编码器。
技术关键词
大语言模型 语义向量 样本 编码器 文本 模版 层次聚类算法 计算机设备 存储计算机程序 训练装置 处理器 存储器
系统为您推荐了相关专利信息
1
基于AI技术的软件自动化运维方法及系统
自动化运维方法 故障预测模型 故障特征 风险 参数
2
致动器、关节模组、机械臂、双足机器人、四足机器人、四轮足机器人、人形机器人及机器人
减速器组件 关节模组 行星轮组 电机编码器座 连轴
3
一种基于分子标志物检测的糖尿病血管钙化预警方法
血液生化指标 随机森林模型 多层感知机 诊疗数据 基因
4
一种基于语言大模型的病害分割方法及系统
图像块 分割方法 前馈神经网络 图像嵌入 图像编码器
5
训练样本的处理方法和深度学习模型的训练方法、装置
文本 深度学习模型 样本 大语言模型 子模块
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号