摘要
本申请公开了一种数据处理方法、装置、设备及存储介质,涉及云计算技术领域。本申请在执行第一数据处理进程的过程中,并行调用数据校验进程,通过对进程中预设校验时间点之前预设时间段内的实际处理量和理论处理量进行数据校验。在校验结果为实际处理量和理论处理量之间的差值满足预设修正条件的情况下,再调用与第一数据处理进程处理逻辑相同的第二数据处理进程,对预设时间段内数据源产生的数据进行处理,得到无异常的数据修正结果,并利用数据修正结果覆盖数据湖仓中存储的第一数据处理进程所得的数据处理结果,对数据湖仓的存储数据进行修正。基于此,提高了数据校验和修正的时效性和效率,且不影响数据处理进程正常运行。
技术关键词
数据处理方法
时间段
进程
数据存储系统
理论
备份
日志
目录
离线
电子设备
分区
计算机存储介质
数据处理单元
云计算技术
存储计算机程序
数据处理装置
校验单元
逻辑
处理器
系统为您推荐了相关专利信息
路段
事故预警方法
随机森林模型
交通事故数据
覆盖率
路径规划方法
因子
障碍物
能量消耗
概率密度函数