一种基于跨模态对齐的用户画像构建方法、系统及设备

本发明公开了一种基于跨模态对齐的用户画像构建方法、系统及设备，方法包括对同一用户的若干模态数据分别进行特征提取处理，得到若干与模态数据相对应的特征向量数据；将每一特征向量数据依次映射到构建好的共享语义空间中，得到与每一特征向量数据相匹配的嵌入向量；利用跨模态注意力机制对所有的嵌入向量进行处理，对处理结果进行融合得到每一用户的跨模态融合数据，处理过程包括利用对比损失函数对每一用户的各个嵌入向量的权重进行更新，基于从跨模态融合数据中提取的实体关系，构建当前用户对应的知识图谱；将知识图谱输入到构建好的用户画像生成模型中，得到当前用户的用户画像。本发明实施例提供的方法，能够构建准确的用户画像。