摘要
本发明提供了一种海量小文件的归档管理方法及系统,属于数据管理领域。所述方法包括:对计算机磁盘的I/O活动进行实时监控,将识别出的变化文件存储到由SSD阵列组成的中转站,生成元数据索引和操作日志并进行定期分析,确定文件的保留期限和归档策略,并在虚拟机环境中定期创建SSD阵列中的文件副本,将副本与长期存储器中已归档的数据进行比对,识别出新添加、修改或删除的文件,标记并传输到长期存储器中进行归档,同时创建独立的具有时间戳的归档记录;根据元数据索引、操作日志和独立的归档记录,调用长期存储器中的数据对归档文件进行检索和使用。本发明实现了对海量小文件的高效归档和管理,改善了数据的可检索性和可访问性。
技术关键词
海量小文件
计算机磁盘
管理方法
中转站
数据
索引
存储器
阵列
日志
副本
归档管理系统
RAID配置
存储模块
标记
生命周期管理
监控模块
固态磁盘
检测磁盘
分析模块