摘要
本发明涉及知识图谱技术领域,具体公开了一种基于知识图谱的面料跨模态图文检索方法及存储介质,包括:构建纺织面料结构化知识图谱;根据TransR模型对纺织面料结构化知识图谱进行语义建模;根据图注意力网络对纺织面料结构化语义模型进行语义结构提取;提取纺织面料图像深层语义特征;根据纺织面料实体语义结构与图像深层语义特征构建图像与实体双向对比损失函数;根据双向对比损失函数以及结构化语义模型构建多任务联合损失函数;根据多任务联合损失函数对实体语义结构与图像深层语义特征的空间对齐匹配度进行训练,获得面料跨模态图文检索结果。本发明提供的基于知识图谱的面料跨模态图文检索方法能够适用于面料的跨模态图文检索。
技术关键词
面料
纺织
语义结构
联合损失函数
实体
语义特征
跨模态图文检索
多任务
存储计算机程序
表达式
关系
三元组
图像编码
多头注意力机制
知识图谱技术
系统为您推荐了相关专利信息
数字孪生体
深度神经网络
动态配准方法
补偿误差
训练样本集
路径构建方法
风险评估模型
病历
机器学习模型
医疗实体识别