重复数据检测方法、装置、计算机程序产品及电子设备

本申请公开了一种重复数据检测方法、装置、计算机程序产品及电子设备。涉及数据处理领域及金融科技领域，该方法包括：读取待处理文件中的明细数据，提取明细数据中的目标明细值，并按照预设哈希算法计算目标明细值的目标哈希值；按照预设键值对的形式将目标明细值和目标哈希值插入分布式缓存数据库；在分布式缓存数据库中检测目标明细值和目标哈希值是否插入成功；在目标明细值和目标哈希值插入失败的情况下，确定待处理文件中存在重复明细数据。通过本申请，解决了相关技术中入账的文件中存在重复数据，影响业务处理效率的问题。