一种多模态实体关系联合抽取方法

本发明公开了一种多模态实体关系联合抽取方法，先下载原始图像及原始图像对应的文本描述，然后提取文本描述与原始图像的特征；接着，计算图像特征在文本特征上的投影分量，并选出每个像素点的最大投影值进行归一化；然后根据归一化结果对对图像特征进行加权处理，并将加权处理的结果与文本特征进行跨模态特征融合，最后根据融合结果提取实体关系三元组。