一种基于多模态融合的数据处理方法以及装置

本申请提供了一种基于多模态融合的数据处理方法以及装置，属于数据处理技术领域，方法包括：获取一维数据和图像数据；根据所述图像数据的尺寸，将所述一维数据转换为二维数据；对所述二维数据中的空余位置进行补零处理；将补零处理后的二维数据与所述图像数据进行堆叠处理，得到多层堆叠的输入特征图；通过神经网络，对多层堆叠的所述输入特征图进行融合处理，得到融合特征图；根据所述融合特征图，进行数据处理。本发明通过将一维数据转换为与图像数据相同尺寸的二维数据，并将其与图像数据进行堆叠，可以统一不同模态的数据格式，使得它们能够在相同的特征空间中处理，大大简化了异构数据之间的对齐过程。