一种基于ETL多源异构数据采集可复用模型建立的方法

本发明提供一种基于ETL多源异构数据采集可复用模型建立的方法，包括ETL调度模块、ETL可执行程序模块和ETL反馈评价模块。ETL调度模块用于控制ETL任务的启动运行，包含对ETL任务启动时间、运行周期及触发条件等的控制，通过设置定时任务，控制调度执行脚本，触发ETL可执行程序的运行，通过建立数据冗余机制，调度控制任务触发条件，保证调度任务的高可用性；ETL可执行模块通过研究ETL可执行程序机理，搭建ETL模型，用户仅需通过配置任务i d等参数建立ETL执行任务，实现对源表到目标表的数据采集。本发明通过搭建数据采集可复用模型，实现了对钢铁企业多源异构数据的自动采集，建立了企业级大数据信息库。兼顾了数据采集的高可用性及数据准确性。