摘要
本发明公开了一种跨模态知识图谱构建的方法,涉及知识图谱技术领域,方法包括:获取多源异构数据,经采集、结构解析、模态识别与分类、清洗及标准化处理,形成结构化多模态数据;从结构化多模态数据中提取各已识别模态的实体及关系,汇总形成多模态知识要素集合;将多模态知识要素集合中的不同模态实体映射至统一语义空间,通过语义匹配对齐融合,生成统一实体关系集合;将其规范化为知识三元组,经图数据库存储组织形成跨模态知识图谱。本方法可缓解多模态异构信息对齐难、实体关系提取难的问题,增强语义关联,提升知识图谱完整性与多场景适应性。
技术关键词
多模态
跨模态
图谱
多源异构数据
三元组
实体间关系
语义向量
索引
文本
识别查询意图
视频帧
实体关系提取
声纹识别模型
动作识别模型
实体识别模型
系统为您推荐了相关专利信息
机器学习模型
时空卷积神经网络
动态时间规整算法
多模态特征
收集排水系统
多模态特征融合
智能诊断方法
校正传感器漂移
多尺度异常检测
诊断决策系统