一种基于多模态大模型的数据去重方法

本申请涉及数据处理技术领域，尤其涉及一种基于多模态大模型的数据去重方法。在本申请实施例中，电子设备对目标媒体数据进行特征提取，并基于提取得到的目标特征数据和存储的其他特征数据进行快速对比，若最大相似度在一定阈值范围内则认为目标媒体数据为疑似重复数据。对于疑似重复数据，电子设备调用可以处理多图序列的多模态大模型进行复核确认，提高媒体重复数据判断的准确性。