一种处理多模态混合数据并增强模型生成效果的方法

本申请公开了一种处理多模态混合数据并增强模型生成效果的方法，属于数据处理技术领域，本申请构建了多模态解析工具链，通过多模态解析工具链对多模态数据进行解析和特征提取，解决了数据处理难的问题，缩减了单条数据的处理时长，降低了数据处理成本，相比人工标注团队所需的工作站集群，硬件投入减少80%，本申请还通过建立多模态数据关联关系和图数据库实现了多模态数据的相互关联，解决了模态割裂的问题，且通过关联关系可实现文本搜图，文本搜表的技术效果，突破文本离散符号与图像连续表征的语义壁垒，实现图文内容关联响应。