基于多视角对比学习的联合多模态实体关系抽取生成方法

AITNT
正文
推荐专利
基于多视角对比学习的联合多模态实体关系抽取生成方法
申请号:CN202411511729
申请日期:2024-10-28
公开号:CN120725116A
公开日期:2025-09-30
类型:发明专利
摘要
本发明公开了基于多视角对比学习的联合多模态实体关系抽取生成方法,具体涉及实体关系抽取技术领域,方法将所有抽取文本中的实体关系的三元组转换成由头实体及其实体类型、尾实体及其实体类型的位置索引以及两个实体之间的关系组成的序列,通过基于BART的编码‑解码模型,从多模态输入中端到端生成目标索引序列;基于实体、图像和上下文增强分别为每个训练样本构建了三个正样本,并引入多视角对比学习算法,该算法采用批内负样本的交叉熵目标,以最小化正样本之间的距离,并通过目标索引序列指定头实体、尾实体在句子中的区间,以及关系的类别,以便多模态表示能够捕捉到具有相似实体和关系提及的样本之间的语义相似性。
技术关键词
多视角 生成方法 多模态 编码器 文本 序列 索引 学习算法 样本 标记 实体关系抽取技术 三元组 解码模型 同义词 解码器 视觉特征提取
系统为您推荐了相关专利信息
1
一种智能无人机火灾预警系统及其路径优化方法
智能无人机 路径优化方法 火灾预警系统 混合建模方法 图像识别单元
2
语音交互方法、装置、智能终端及可读存储介质
语音交互方法 人脸特征 生成数字人 人脸表情 多模态信息
3
中医药多模态LLM训练方法及其应用
特征提取模型 中医药 注意力机制 时序特征 视觉特征提取
4
多模态数据的处理方法及装置
多模态 数据 门控循环单元 独立语义 跨模态
5
一种基于联合retinex机制的内窥镜图像增强方法
内窥镜 图像增强模型 注意力 池化特征 全卷积神经网络
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号