基于实时数仓技术的数据清洗方法、装置、设备及介质

本发明涉及数据治理技术领域，公开了一种基于实时数仓技术的数据清洗方法、装置、设备及介质。该方法包括：基于实时数仓架构获取实时数据；对实时数据进行质量分析确定实时数据的数据质量分析结果，包括：至少一种数据质量问题；根据数据质量问题确定初始清洗规则；将从预设清洗数据集中获取的部分样本数据和从实时数据中获取的部分清洗数据作为目标数据；进行数据清洗，得到清洗后的目标数据；在确定清洗后的目标数据不满足预设评估指标时，对初始清洗规则进行调整，直至清洗后的目标数据满足预设评估指标，得到目标清洗规则，对实时数据进行数据清洗。本发明可以实时、及时的对数据进行清洗，并且提高了清洗规则的针对性、适用性、准确性。