46、存储系统与虚拟数据中心性能优化研究

存储系统与虚拟数据中心性能优化研究

在当今的信息技术领域，存储系统的性能优化和虚拟数据中心的高效部署是至关重要的研究方向。下面将为大家详细介绍存储服务器分组（SSG）方案以及虚拟数据中心中虚拟机部署的相关研究。

存储服务器分组（SSG）方案

传统的存储集群配置方法虽然能实现较高的访问并行性，但会导致存储服务器磁盘的高干扰、热门文件的数据访问竞争加剧以及Incast效应恶化。为解决这些问题，提出了存储服务器分组（SSG）方案。

SSG方案概述

SSG方案主要通过与客户端上运行的每个跟踪线程进行通信，定期更新文件的流行度。其条带化单元大小的分配方式为：工作负载的平均请求大小除以其服务器组中的I/O服务器数量。在工作负载准入控制中，SSG会为要访问的文件初始化条带化参数，并且文件流行度跟踪会定期更新每个文件的流行度，直到文件被删除。

SSG方案的开销包括在参考服务器上对应用程序进行分析的时间以及跟踪文件流行度的时间。在有限降低预测准确性的情况下，SSG可以在运行期间以相对较粗的粒度对I/O请求进行采样，从而近似工作负载的特征。这种分析时间还可以与高性能计算环境中的作业调度时间或其他客户端 - 服务器环境中的请求排队时间重叠。此外，由于SSG使用线程通信进行文件流行度跟踪，如果数据访问具有良好的局部性，则可以降低通信频率以减少开销。

实验设置

实验在一个基于集群的专用存储系统上进行，该系统有16个节点。所有节点配置相同，均配备双1.6GHz奔腾处理器、1GB内存和80GB SATA硬盘。集群使用Lustre并行文件系统（版本1.6.5.1），其中8个节点配置为存储服务器，1个节点同时作为元数据服务器。