摘要
本申请实施例公开了一种知识图谱与多模态融合的政务信息推荐方法及设备,属于信息推荐技术领域,解决用户在获取政务信息时,推荐结果与需求匹配度较低的问题。包括,基于用户历史检索行为生成用户偏好向量,对政务知识图谱进行粗粒度检索,得到候选知识子图;将候选知识子图与用户上传的多模态数据进行融合,得到多模态语义向量;对多模态语义向量进行多跳信息聚合处理,基于聚合后的图节点向量与用户查询向量进行细粒度检索;基于重排序机制,对检索结果进行重排序,确定出推荐政务知识子图;基于多模态数据与推荐政务知识子图,进行视觉问答和视觉常识推理处理,得到多模态推理结果,基于用户需求,将多模态推理结果作为推荐内容发送至用户。
技术关键词
政务
文本特征向量
多模态
语义向量
推荐方法
图谱
实体
预训练语言模型
生成用户
问答模型
历史点击数据
信息推荐技术
拓扑结构特征
节点特征
视觉
矩阵
关键帧
计算机程序指令
系统为您推荐了相关专利信息
社会
多模态特征
深度学习模型
记忆机制
非暂态计算机可读存储介质