一种多模态特征融合方法、系统、设备、介质及程序产品

本发明公开一种多模态特征融合方法、系统、设备、介质及程序产品，涉及特征融合技术领域，包括：对多模态数据进行编码和语义增强得到多模态原始特征和多模态语义特征；计算原始特征相似度矩阵和语义特征相似度矩阵，且进行稀疏化处理和归一化处理；根据归一化后的原始特征相似度矩阵和语义特征相似度矩阵，聚合原始特征和语义特征，根据用户与商品的交互得到商品集合ID嵌入特征；从商品集合ID嵌入特征中提取模态偏好，结合商品集合原始特征和商品集合语义特征，得到整体的多模态原始特征、多模态语义特征和ID特征，将三者拼接得到多模态融合特征。解决多模态数据的信息冗余和冲突问题，捕捉不同模态特征间的关系，提高融合效果。