一种基于关系型的面向大规模多模数据的数据导入方法

一种基于关系型的面向大规模多模数据的数据导入方法，属于计算机技术领域；获取原始数据文件、存储格式和数据模型；通过数据转换模块对进行解析、读取并结构化获取原始数据文件数据信息；通过分块并行写入方法将数据信息生成统一关系数据模型文件，并存储为同一文件存储格式CSV；通过数据关联模块进行预处理；提取模式信息，将模式信息发送给模式转换模块，模式转换模块自动生成关系表并建立DDL语句；将DDL语句和CSV文件发送至SQL处理终端，通过数据库的COPY语句和DDL语句将多模数据统一转换为关系数据，并存储到关系数据库的底层存储结构中。本发明将多模数据统一存储在同一存储层中，使查询能直接从数据库存储层调用，加快了数据转换效率。