摘要
本发明适用于信息抽取技术领域,提供了一种基于混合模型的文本信息抽取方法及系统,其方法包括:将获取到的待抽取信息转化为文本序列;构建混合模型,所述混合模型融合了线性状态空间模型和优化后的Transformer模型;将所述文本序列输入至所述混合模型中,使得所述混合模型中的编码网络对所述文本序列进行特征编码,得到所述文本序列对应的特征表示;利用所述混合模型中的解码网络对所述特征表示进行解码处理,输出所述待抽取信息对应的抽取结果。本发明混合模型不仅保留了整体模型的低推理时延特性,且能够精准地捕捉和建模注意力窗口内的局部信息,混合模型形成优势互补,有效提高了文本信息抽取的效率。
技术关键词
文本信息抽取方法
状态空间模型
计算机可读指令
解码网络
序列
表达式
信息抽取系统
线性单元
信息抽取技术
编码
可读存储介质
处理器
矩阵
注意力机制
滑动窗口
计算机设备
系统为您推荐了相关专利信息
XGBoost模型
电力负荷预测方法
标量特征
高维特征向量
序列
正交频分复用
增广拉格朗日
矩阵
信号
傅里叶变换处理
多传感器融合
状态监测方法
重构误差
方差贡献率
皮尔逊相关系数