一种多模态数据处理方法、装置、电子设备及存储介质

本申请实施例提供了一种多模态数据处理方法、装置、电子设备及存储介质，该方法包括：对多个文本数据进行层次聚类，得到文本关系图；文本关系图包含多个文本数据各自对应的节点；针对任一节点，确定与所述节点对应的文本数据语义相同的第一文本，以及，确定与所述节点对应的文本数据语义相反的第二文本；针对任一节点对应的非文本数据，将所述非文本数据，分别与所述节点对应的各正向文本以及各第二文本进行组合，获得样本对；其中，所述节点的正向文本包括所述节点对应的文本数据以及第一文本，还包括所述节点的上级节点对应的文本数据以及第一文本。本实施例不仅获得了更多的正向文本，还获得更有针对性的第二文本，提高对比学习的效率和效果。