学习笔记,来自百知道
hadoop 每个节点上最大的容器数多少
这个看你的yarn怎么设置了,容器数据与cpu核数和内存大小都有关系,比如说下面这个配置:
yarn.nodemanager.resource.cpu-vcores
16
yarn.scheduler.minimum-allocation-vcores
1
yarn.nodemanager.resource.memory-mb
30000
yarn.scheduler.minimum-allocation-mb
1024
每台机器为集群分配的cpu为16核,物理内存为30G左右,每个容器最小使用1核cpu和1G的物理内存,则每台机器最多可以为集群提供16个容器。(每个节点都满足上述的cpu和内存大小)。