Slurm 开源项目使用教程

Slurm 开源项目使用教程

slurm Slurm: A Highly Scalable Workload Manager 项目地址: https://gitcode.com/gh_mirrors/sl/slurm

1. 项目的目录结构及介绍

Slurm 项目的目录结构如下：

slurm/
├── auxdir/
├── contribs/
├── debian/
├── doc/
├── etc/
├── slurm/
├── src/
└── testsuite/

目录介绍：

• auxdir/：包含用于配置和构建 Slurm 的 autotools 脚本和文件。
• contribs/：包含一些与 Slurm 相关的工具和 API，这些工具不属于 Slurm 的核心功能。
• debian/：包含用于 Debian 系统的相关文件。
• doc/：包含 Slurm 的文档，包括 LaTeX、HTML 和 ASCII 文本格式的文档，以及 Slurm 命令和配置文件的手册页。
• etc/：包含 Slurm 的配置文件示例和一些有用的脚本。
• slurm/：包含安装时使用的头文件，如 slurm.h 和 slurm_errno.h。
• src/：包含 Slurm 的源代码，进一步细分为多个子目录，如 src/api、src/slurmctld 等。
• testsuite/：包含用于测试 Slurm 的测试套件，使用 Check、Expect 和 Pytest 编写。

2. 项目的启动文件介绍

Slurm 的启动文件通常位于 etc/ 目录下，主要包括以下几个关键文件：

• slurm.conf：这是 Slurm 的主要配置文件，定义了集群的资源管理、作业调度和监控的配置。
• cgroup.conf：用于配置 cgroup 资源限制的文件。
• topology.conf：用于配置集群的拓扑结构。
• gres.conf：用于配置通用资源扩展（GRES）。

启动 Slurm 时，通常需要确保这些配置文件正确配置，并通过 slurmctld 和 slurmd 服务来启动 Slurm 的控制守护进程和节点守护进程。

3. 项目的配置文件介绍

3.1 slurm.conf

slurm.conf 是 Slurm 的主要配置文件，包含以下关键配置项：

• ClusterName：定义集群的名称。
• ControlMachine：定义控制节点的名称。
• SlurmUser：定义运行 Slurm 的用户。
• AuthType：定义认证类型。
• CryptoType：定义加密类型。
• MpiDefault：定义默认的 MPI 类型。
• SelectType：定义资源选择类型。
• SelectTypeParameters：定义资源选择参数。

3.2 cgroup.conf

cgroup.conf 用于配置 cgroup 资源限制，包含以下关键配置项：

• CgroupAutomount：是否自动挂载 cgroup。
• ConstrainCores：是否限制 CPU 核心。
• ConstrainRAMSpace：是否限制内存空间。
• ConstrainSwapSpace：是否限制交换空间。

3.3 topology.conf

topology.conf 用于配置集群的拓扑结构，包含以下关键配置项：

• SwitchName：定义交换机的名称。
• SwitchType：定义交换机的类型。
• SwitchPort：定义交换机的端口。

3.4 gres.conf

gres.conf 用于配置通用资源扩展（GRES），包含以下关键配置项：

• Name：定义 GRES 的名称。
• Type：定义 GRES 的类型。
• File：定义 GRES 的文件路径。

通过正确配置这些文件，可以确保 Slurm 在集群中高效地管理和调度作业。

slurm Slurm: A Highly Scalable Workload Manager 项目地址: https://gitcode.com/gh_mirrors/sl/slurm