数据多模态表征方法、装置、电子设备及存储介质

本发明实施例公开了一种数据多模态表征方法、装置、电子设备及存储介质，该方法包括：获取待处理数据；基于待处理数据和预先训练得到的多模态表征模型，确定与待处理数据相对应的多模态表征向量；其中，多模态表征模型中包括视频处理子模型、文本处理子模型以及多模态解码器，视频处理子模型用于对视频帧序列和提示文本处理，文本处理子模型用于对文本内容和提示文本处理，多模态解码器用于对视频处理子模型和文本处理子模型输出的结果进行融合处理，得到建立视频帧序列和文本内容之间关联关系的多模态表征向量。通过本发明实施例的技术方案，以实现便捷、高效地建立视频帧序列和文本内容之间准确关联关系的多模态表征向量的技术效果。