一种基于人工智能驱动的多模态数据检索生成合成方法及系统

本发明涉及人工智能技术领域，具体涉及一种基于人工智能驱动的多模态数据检索生成合成方法及系统，包括多模态特征提取、跨模态对齐、特征融合、多模态检索与排序和多模态生成，通过多模态特征提取，采用不同深度学习模型对多模态数据分别特征提取并转为向量，通过跨模态对齐，将不同模态特征向量映射到同一向量空间，并通过特征融合，用注意力机制计算相关性权重并加权求和融合特征，再通过多模态检索与排序，计算查询向量与候选数据相似度并排序，最后通过多模态生成，将检索知识作为外部知识融入生成模型，生成多模态合成答案，从而能够有效整合和利用多模态数据中的信息。