摘要
本申请实施例提供一种数据集成方法、装置、服务器、介质及程序,其中方法包括:在配置源数据库的连接信息后,通过全量数据采集,将源数据库的全量数据拉取到中间库的中间表,并从中间表拉取到目标库的目标表;在源数据库存在数据更新时,通过增量数据采集,将源数据库的增量数据拉取到中间表,并从中间表拉取到目标表;对于全量数据采集,将全量数据采集到中间表,再根据数据集成语句,从中间表拉取到目标表;对于增量数据采集,根据增量更新字段,将增量数据采集到中间表,再利用带有增量更新子句的数据集成语句,从中间表拉取到目标表;数据从中间表拉取到目标表还进行数据类型转换和字段映射。本申请实施例可以提升数据集成过程中的效率。
技术关键词
数据集成方法
增量更新
语句
数据集成平台
数据映射关系
计算机可执行指令
数据更新
集成模块
消息
字段
网络
下游系统
接口
数据集成装置
智能匹配算法
主题
存储系统
系统为您推荐了相关专利信息
机器学习算法
观测方法
LSTM模型
语句
多指标