摘要
本申请公开了一种异构数据同步处理方法、装置、设备及存储介质,涉及数据处理技术领域,包括:在监听到应用启动事件之后,读取通用管道的配置信息,其中,所述通用管道包括输入组件、过滤组件以及输出组件;在根据所述配置信息启动所述通用管道之后,通过所述输入组件从异构数据源中获取输入数据;通过所述过滤组件对所述输入数据进行规则引擎处理,得到目标数据;通过所述输出组件将所述目标数据发送至指定目标。本申请高效且低延迟地捕获源数据变更并分发到多个异构目标系统。
技术关键词
通用管道
数据同步
异构
过滤组件
二进制指数退避
封装工具
告警机制
服务端
数据处理技术
队列
终点
表达式
列表
处理器
有效值
可读存储介质
模块
存储器
算法