摘要
本发明提供了一种提高大型分布式文件系统元数据访问效率的方法,涉及数据管理技术领域。本发明首先通过元数据解耦分区管理环节将每个目录的访问元数据与其父目录分组,将内容元数据与其子目录分组,从而实现元数据的高局部性;其次通过可预测文件路径构建环节为每个目录分配一个可预测的ID,客户端可以推测文件全路径里所有中间目录的ID,然后为路径上的每一个单元并行发送查找操作,大大减少了元数据操作的延迟;最后通过元数据目录协调缓存环节在客户端缓存目录的访问型元数据,以就地解决对根目录的频繁查找,并且在元数据服务器上非主动地使缓存条目无效,从而缓解根热点并实现了可扩展的路径解析。
技术关键词
数据服务器
客户端
访问文件系统
分区管理
条目
文件系统目录树
三元组
数据管理技术
列表
分布式架构
语义
加密
有效性
集群
热点
系统为您推荐了相关专利信息
客户账户数据
神经网络模型
计算机执行指令
推送方法
脚本
训练样本数据
滑动时间窗口
访问特征
客户端设备
处理单元
微服务架构
管控平台
子模块
业务逻辑模型
钢结构