一种改善Lustre小文件管理和性能的方法及系统

本发明属于Lustre文件管理技术领域，具体涉及一种改善Lustre小文件管理和性能的方法及系统，包括嵌套文件系统、三级索引模块、缓存索引模块和自适应缓存模块；嵌套文件系统实现小文件的管理和存储；三级索引模块，包括小文件全局元数据索引、容器文件内部索引和缓存索引，用以优化小文件的检索与存储管理；缓存索引模块，用于管理高频访问的小文件，减少重复的I/O请求；自适应缓存模块，客户端根据文件访问的频率和模式动态调整小文件的缓存策略提升高频访问文件的读取速度，并减少网络I/O操作。通过嵌套文件系统解决了Lustre文件系统在处理小文件时的性能瓶颈，通过三级索引架构减少对元数据服务器和对象存储服务器的访问负担。