9、大数据利器：Hadoop 集群管理与配置全解析

大数据利器：Hadoop 集群管理与配置全解析

1. CapacityScheduler 属性配置

CapacityScheduler 有多个重要属性，具体如下：
| 属性 | 描述 |
| — | — |
| mapred.capacity - scheduler.maximum - system - jobs | CapacityScheduler 可同时初始化的最大作业数 |
| mapred.capacity - scheduler.queue.hdqueue.maximum - initialized - active - tasks | 队列 hdqueue 中所有作业可同时初始化的最大任务数 |
| mapred.capacity - scheduler.queue.hdqueue.maximum - initialized - active - tasks - per - user | 队列 hdqueue 中每个用户的所有作业可同时初始化的最大任务数 |
| mapred.capacity - scheduler.queue.hdqueue.supports - priority | 是否支持作业调度的作业优先级 |

Hadoop 支持使用队列 ACL 对队列进行访问控制，可参考 相关链接 获取更多信息。

2. 配置 Fair Scheduler