摘要
本发明公开了一种面向异构数据源的元数据管理系统及方法,属于大数据技术领域。本发明的系统中用户选择适配器,配置被采集工具或产品的版本和连接参数,管理和维护数据源配置信息;使用工作流引擎管理元数据采集任务,配置自动化工作流,支持采集任务的参数配置;采用若干个采集程序并发执行采集任务,支持若干种采集方式和不同类型的数据源,对于模板采集,使用Excel文件格式,维护和导入元数据;将采集到的元数据组织成符合公共仓储模型的结构,存储在关系型数据库中;使用TF‑IDF算法进行查询;构建数据流向图,向前追溯数据来源,向后追溯数据流向;进行环境一致性巡检,支持元数据生命周期管理,提供变更查询和订阅功能。
技术关键词
适配器
数据管理方法
仓储模型
工作流引擎
数据生命周期管理
自动化工作流
关系型数据库
数据变更信息
报表工具
数据依赖关系
孤立森林算法
Excel模板
采集工具
异构
数据管理系统
节点
配置信息管理
神经网络模型
系统为您推荐了相关专利信息
自动化仓储物流
调度系统
分配系统
数据采集模块
状态检测器
遥感图像分割方法
神经网络架构
多尺度
注意力
语义特征提取
维修训练系统
网络传输模块
控制面板
信号测试点
编辑
图像美学评价方法
状态空间模型
分支
文本编码器
图像编码器