一种多模态跨域转换方法、系统、设备及存储介质

本发明公开了一种多模态跨域转换方法、系统、设备及存储介质，包括以下过程，S1：利用自编码器网络对源域和目标域进行训练，获得各自隐空间的特征规范表征数据；S2：根据特征规范表征数据中标签的不同，进行重心平移，使源域和目标域下的数据空间位置对齐；S3：采用半离散最优传输算法，消除源域和目标域中标签之间的空间间隙；S4：采用约束调和映射技术，将源域和目标域的隐空间分别映射至各自的正则参数域下；S5：利用图约束的几何配准方法将源域和目标域的正则参数域对齐，得到源域到目标域之间的跨域转换关系；S6：应用跨域转换关系，对待转换的模态进行跨域转换，得到目标模态。能够提高模态之间跨域转换的准确性和生成质量。