基于三角度注意力和实体-关系相关性的DocRE方法

AITNT
正文
推荐专利
基于三角度注意力和实体-关系相关性的DocRE方法
申请号:CN202510899504
申请日期:2025-07-01
公开号:CN120407806B
公开日期:2025-09-09
类型:发明专利
摘要
本发明具体公开了一种基于三角度注意力和实体‑关系相关性的DocRE方法,属于自然语言处理技术领域。该方法首先将输入文档编码至预训练语言模型PLM,获取嵌入表示及多头注意力矩阵;接着设计实体对‑上下文注意力、实体对‑证据注意力和实体对间注意力三种机制,并通过注意力迁移模块对三类注意力信息进行特征对齐与加权融合,生成统一的实体对语义表示;然后构建实体‑关系共现图,借助图注意力网络实现节点特征聚合与传播,获取实体‑关系共现特征;最后将融合语义特征与共现特征拼接,用于实体对关系的分类预测。该方法有效提升了跨句推理能力和远距离实体建模效果,增强了模型对复杂关系的抽取准确性与泛化能力。
技术关键词
关系 注意力机制 融合语义 预训练语言模型 损失函数设计 挖掘实体 矩阵 焦点 节点特征 标签 自然语言 垂直轴 远距离 非线性 键值
系统为您推荐了相关专利信息
1
接口配置方法、装置及存储介质
接口配置方法 关系 对象 同义词 数据
2
一种多模态驱动的虚拟数字人面部动画生成方法及系统
语音特征 文本 动画生成方法 生成对抗网络 头部姿态控制
3
一种基于数字底座的楼宇自控系统及方法
楼宇自控系统 楼宇自控方法 逻辑 协议解析器 底座
4
基于局部与全局自监督网络的稀疏阵列波达方向估计方法
全局特征提取 阵列 神经网络训练数据 线性单元 DOA估计
5
一种基于深度学习的医疗智能对话方法
智能对话方法 疾病 节点 推理机制 诊断方法
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号