一种数据查重算法确定方法、装置、设备及介质

本申请提供了一种数据查重算法确定方法、装置、设备及介质，用以确定适合数据的数据查重算法。该方法中可以将数据输入预先训练完成的数据特征分析模型中，通过对该数据进行特征分析，获得该数据的数据来源，并可以根据预先保存的数据来源与数据查重算法的对应关系，将与该数据的数据来源对应的数据查重算法，确定为该数据适用的数据查重算法，基于此，可以实现为数据选择适合的数据查重算法，进而基于该数据查重算法可以高效、准确地进行数据查重操作，提高数据处理效率和精度，提高数据的质量和准确性的目的。