超级会员免费看
本文详细介绍了在Hadoop3.x中如何进行Namenode的内存配置，强调了自动配置的不合理性，并提供了调优建议。通过修改hadoop-env.sh文件，将Namenode和Datanode的内存分别设置为1GB，以适应更大规模的数据存储需求，并给出了配置及验证步骤。
然后我们再来看,
首先namenode节点,我们说用来存,元数据的
如果一台服务器是128G的内存,那么,在namenode的文件块每个,占用150byte.
这个服务器就可以存储,9.1亿个文件块...这样的话,基本上,就够用了.
可以看到我们的服务器内存是4G对吧
在hadoop2.x中,namenode的内存,默认是2000m,如果我们的服务器内存是4G,那么给
namenode配置可以配置3G,因为要留下1G给操作系统,和其他软件使用
在hadoop2.x 中,可以配置hadoop-env.sh 文件,来配置namenode的内存
订阅专栏 解锁全文
扫一扫
416
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
