一种基于复杂矩阵的分布式实时数据质量检测方法及系统

AITNT
正文
推荐专利
一种基于复杂矩阵的分布式实时数据质量检测方法及系统
申请号:CN202411698157
申请日期:2024-11-26
公开号:CN119557293A
公开日期:2025-03-04
类型:发明专利
摘要
本发明公开了一种基于复杂矩阵的分布式实时数据质量检测方法及系统,属于实时数据质量检测技术领域,包括:从数据源获取实时的数据流,进行数据清洗与转换后,生成初始实时数据流;根据所述初始实时数据流的数据样本和质量指标,进行质量评估后,通过Flink进行结果输出。本发明在实时数据质量监测领域取得了显著的进展,通过引入复杂矩阵算法和结合Flink流式处理,成功解决了实时数据质量检测的关键问题,具有实际应用的广泛潜力和优越性。
技术关键词
分布式实时数据 矩阵 样本 算法引擎 队列 非线性 消息 异常数据 数据格式 日志 模块 因子 元素 标记
系统为您推荐了相关专利信息
1
一种城市工程建设适宜性评价方法及其应用
适宜性评价方法 层次结构模型 评价指标体系 工程地质 因子
2
针对Text2SQL任务的多LLM模型集成推理方法
大语言模型 推理方法 文本 语句 关键词
3
家用电器线上线下融合销售系统
销售系统 线上线下 生成个性化推荐 家用电器 生成用户
4
基于区域增长算法的户型图凹凸角判定方法及装置
区域增长算法 线段 判定方法 矩形 轮廓图像
5
一种基于机器学习与混合优化算法的微电网发电调度方法
电网发电调度 混合优化算法 粒子群优化算法 机器学习模型 可再生能源
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号