基于多模态数据的任务预测方法和装置、电子设备、介质

本申请实施例提供了一种基于多模态数据的任务预测方法和装置、电子设备、介质，涉及人工智能领域，应用于金融科技和医疗领域。该方法包括：获取目标任务的多模态序列数据；对多模态序列数据进行特征提取得到至少两个单模态时序特征，并对这些时序特征进行两两组合得到时序特征有序对；基于时序特征有序对的第一时序特征对第二时序特征的关注度和第二时序特征对第一时序特征的关注度，对至少两个单模态时序特征进行特征融合得到多模态融合特征；对多模态融合特征进行解码，生成与目标任务匹配的预测数据，预测数据为分类任务的类别标签或识别任务的识别信息。本申请实施例能够提高对多模态数据融合的准确性，以提高对具体任务场景的预测准确性。