摘要
本发明实施例涉及一种检索文档嵌入特征的处理方法和装置,所述方法包括:设置一个用于对检索文档的嵌入特征进行相关性和隔离符特征添加的处理模型记为嵌入特征增强模型;并将嵌入特征增强模型添加到传统RAG框架中得到对应的增强RAG框架;以增强RAG框架为文本生成任务执行主体基于多类文本生成任务对嵌入特征增强模型进行训练。通过本发明的嵌入特征增强模型可以提高大语言模型对检索文档的辨识能力、降低冗余信息干扰、提高对大语言模型生成质量的保障能力。
技术关键词
嵌入特征
大语言模型
标签文本
输入端
执行主体
框架
编码器
编码规则
分词
训练参数集
优化器
模型训练模块
令牌
数据
收发器
计算机
序列
系统为您推荐了相关专利信息
文档分类方法
语义特征
文本段落
视觉
文档分类装置
大语言模型
智慧城市管理
多模态交互
智慧城管
自定义函数