摘要
本发明属于自然语言处理技术领域,具体地说是一种基于知识图谱增强的大语言模型训练方法。本发明通过引入外部知识图谱以及增强实体嵌入,增强了LLM对于外部知识和实体间复杂关系的理解,提高LLM对于复杂问题的理解和解答能力。特别对于垂直领域,可以通过引入特定领域相关的外部知识图谱信息,增强LLM对领域专有知识和实体间复杂关系的理解能力,提高LLM在垂直领域下的应用效果。
技术关键词
语言模型训练方法
大语言模型
图谱
前馈神经网络
标记
实体链接技术
文本
注意力机制
序列
解析器
编码块
自然语言
矩阵
节点数
定义
关系
系统为您推荐了相关专利信息
多域特征
多标签
定位方法
人脸深度
离散余弦变换
科技
数据画像
图谱
TextRank算法
关键词