图文关联方法及相关设备

本公开的实施例提供了一种图文关联方法及相关设备。图文关联方法包括：提取图像中的第一密度区域和第二密度区域；将第一密度区域分割为第一块，将第二密度区域分割为第二块；将第一块通过第一特征提取模型进行处理，获得图像的第一特征信息；将第二块通过第二特征提取模型进行处理，获得图像的第二特征信息；融合第一特征信息和第二特征信息，获得融合特征信息；根据融合特征信息获得图像的文字描述信息；将图像和文字描述信息分别输入至多模态模型的视觉编码器和语言编码器进行处理，获得图像和文字描述信息的匹配度；根据匹配度满足条件的文字描述信息获得图像的说明文字，并将说明文字与图像关联。