摘要
本发明公开了一种基于偏差自纠偏校准的文本广义意图发现方法及系统,包括:获取预测文本样本并输入至预设广义意图发现模型中得到模型原始输出;采用Softmax函数对模型原始输出进行分类,将Softmax最大值所属类别作为文本样本的样本预测类别。其中,广义意图发现模型内部设置有偏分支和可训练分支,首先通过预训练得到一个存在偏差的有偏分支,并固定模型参数。然后,将训练文本样本分别输入到预训练好的有偏分支和可训练分支,输出两个原始输出,利用有偏分支输出的原始输出,对可训练分支的原始输出进行调整,利用模型对已知类别的偏差来缓解类别偏差和类别混淆,对类别偏差和类别混淆都起到了缓解作用,有效提高了模型对新类别的识别准确率。
技术关键词
文本
样本
标签
Softmax函数
BERT模型
意图
分支
广义
原型
预测类别
偏差
校准
矩阵
参数
代表
因子
可读存储介质
发现系统
处理器
计算机设备
系统为您推荐了相关专利信息
教育资源管理方法
视频特征向量
文本特征向量
图像特征向量
音频特征
LSTM模型
矩阵
计算机执行指令
长短期记忆网络
平台
音频
违规识别方法
文本识别
计算机可读指令
电子终端