摘要
一种面向MPI聚合I/O的层次化聚合方法,该方法中,在每个计算节点上选出一个进程作为聚合器作为本地聚合器,本地聚合器收集并合并本计算节点上其他进程的I/O请求,并将I/O请求合并成更大的连续请求;根据物理网络通信拓扑将物理上相近,即彼此之间通信质量好的一组计算节点划分成一个分组,组内选出一个本地聚合器作为组内聚合器,组内聚合器收集该组内所有本地聚合器的I/O请求,并将I/O请求合并成更大的连续请求;从所有组内聚合器中选取部分组内聚合器作为全局聚合器,全局聚合器收集组内聚合器上的I/O请求,将I/O请求合并成更大的连续请求;全局聚合器通过并行文件系统接口与存储进行交互完成文件读写请求。
技术关键词
并行文件系统
网络通信
节点
两阶段
消息传递机制
进程
物理
计算机存储介质
流水线
电子设备
接口
处理器
集群
存储器
语义
程序
指令
数据