摘要
本发明公开了一种知识图谱构建方法、装置、电子设备以及存储介质,该方法包括:获取文本数据、图像数据以及视频数据;将所述文本数据转换为文本向量,将所述图像数据转换为图像向量,以及,将所述视频数据转换为视频向量;基于双向跨模态注意力机制,确定与目标文本向量匹配的目标图像向量和目标视频向量;根据目标文本向量、目标图像向量以及目标视频向量,确定融合向量,并根据所述融合向量进行知识图谱构建。本发明可以实现多模态数据的关联和融合,显著提高了知识图谱的丰富程度和准确性。
技术关键词
知识图谱构建方法
神经网络结构
文本特征向量
注意力机制
图像块
视频特征向量
跨模态
数据
图像特征向量
搜索算法
知识图谱构建装置
三维卷积神经网络
计算机可执行指令
电子设备
序列
系统为您推荐了相关专利信息
视觉特征
多模态信息
注意力机制
文本编码器
深度学习模型
青少年科普教育
适配系统
状态转移模型
动态
学生
数据预测方法
智慧物联网
交互网络
交互特征
矩阵
服务器节点
移动服务器
网络调度方法
年龄
任务调度模型