一种云存储数据压缩去重系统及其使用方法

本发明涉及云存储数据压缩技术领域，尤其为一种云存储数据压缩去重系统及其使用方法，包括：S1：数据预处理：获取上传数据的格式、大小和类型，并对数据的格式、大小和类型进行识别和分类，对数据小文件进行块级去重，对大文件进行分块压缩策略；S2：数据压缩：对非重复数据执行压缩操作，使用流式压缩技术处理实时数据，并对大文件按固定块大小B分块压缩；本发明中，通过访问频率的多维计算模型，实现了冷热数据的精准分层存储：根据读取和写入操作的权重因子计算访问频率，动态调整热数据和冷数据的分类策略；热数据存储于高性能介质，优先采用低压缩率算法，保证访问速度；冷数据存储于低成本介质，采用高压缩率算法节省存储空间。