摘要
本申请公开了一种AI数仓全链路血缘追踪方法及装置,涉及数据处理技术领域。所述方法包括:获取带有业务术语和实体标签的结构化日志数据;根据结构化日志数据以及业务文档建立知识图谱;根据所述知识图谱以及数据作业执行日志生成血缘元数据;根据所述血缘元数据、数据操作日志以及业务文档构建血缘认知图谱;根据血缘认知图谱、系统实时指标及业务SLO生成治理策略向量并发送给执行引擎,从而使执行引擎根据所述治理策略向量进行处理;获取治理策略执行结果、治理策略执行结果的用户反馈信息以及治理过程中产生的系统日志。本申请能够捕捉数据操作背后的复杂语义和因果关系。
技术关键词
结构化日志数据
图谱
追踪方法
纳什均衡策略
语义向量
数据获取模块
融合语义
实体
链路
博弈论模型
系统日志
多模态
生成可执行
节点
术语
追踪装置
系统为您推荐了相关专利信息
投资风险管理方法
企业
金融
大数据
训练卷积神经网络模型
档案管理方法
构建知识图谱
节点
信息传播路径
文件特征
大语言模型
监控方法
时序特征
语义向量
图像结构
焊缝特征
知识图谱库
焊缝焊接工艺
推理方法
数据