3、构建基于大规模BLOB管理服务的网格文件系统及提升网格可靠性的研究

构建基于大规模BLOB管理服务的网格文件系统及提升网格可靠性的研究

1. 基于大规模BLOB管理服务的网格文件系统实验评估

在处理大规模数据管理问题时，尤其是针对那些需要处理物理分布但逻辑共享且在高并发下进行细粒度访问的应用程序，使用网格文件系统是一个合适的解决方案。为了评估Gfarm/BlobSeer原型，研究人员进行了一系列实验。

1.1 实验环境

实验在Grid’5000测试平台上进行，该平台是一个分布在法国9个站点的实验网格基础设施。每次实验最多使用Grid’5000雷恩站点的157个节点，这些节点配备8GB RAM、2.3 GHz的Intel Xeon 5148 LV CPU，并通过千兆以太网网络互连。集群内TCP套接字（MTU设置为1500 B）的测量带宽为117.5 MB/s。

1.2 无并发情况下的访问吞吐量

• 实验设置 ：对于Gfarm，使用一个元数据服务器和一个文件系统节点；对于BlobSeer，使用10个节点，其中一个节点部署版本管理器、元数据提供者和提供者管理器，另外9个节点托管数据提供者，页面大小设置为8 MB。使用Gfarm的基准测试来测量顺序读写的文件I/O带宽，基准测试配置为访问一个包含1GB数据的单个文件，每个READ（或WRITE）操作的块大小从512字节到1,048,576字节不等。
• 实验结果 ：
  | 系统 | 读吞吐量（MB/s） | 写吞吐量（MB/s） |
  | ---- | ---- | ---- |
  | 纯Gfarm | 65 | 20 |