(一). 操作系统
1. 足够大的内存
2. 操作系统64位,jdk64位
3. 设置linux swap空间的swappiness=0
a1. 永久有效设置(需系统重启) sudo vim /etc/sysctl.conf 在这个文档的最后加上这样一行:
vm.swappiness=0
a2. 临时修改 sudo sysctl vm.swappiness=0
4. CPU
Make sure you have set up your Hadoop to use native, hardware checksumming. See link:[hadoop.native.lib]
(二). 网络
1. 考虑数据传输,带宽足够大(因为主要和datanode节点之间做数据传输)
(三). Java

本文总结了Hbase集群的运维经验,包括操作系统的配置建议,如内存、CPU和swap空间设置;网络优化要点,强调带宽的重要性;Java层面的GC调优,如CMS参数配置;以及Hbase配置调整,涉及Block Cache、RegionServer、CallQueue和Schema Design等多个方面,旨在提升Hbase集群的稳定性和性能。
最低0.47元/天 解锁文章
440

被折叠的 条评论
为什么被折叠?



