首先说一下这篇文章:
得先有个Hadoop集群,对于如何搭建请移步博主另一篇文章:
超详细的Hadoop集群部署_Alex_81D的博客-优快云博客
今天主要说说当节点不够时,如何快速扩容,一会会儿就搞定了,上步骤:
前面这些步骤跟上面一样,我就不细说了
1.配置主节点名hadoop4
2.配置hosts
3.关闭防火墙
4.时间同步
5.配置ssh无密码访问(这步很关键,认真一点)
6.jdk安装(跟之前一样,同目录,免得改东西)
7.安装hadoop
a.复制hadoop文件夹(配置新的hadoop_home)
b.删除新机器中a复制过来的文件数据
这个意思是,删除之前配置的目录地址中数据
当然我要说一下这个问题
这块对于一个用了很久的集群建议还是不要直接scp整个目录了,有可能会很慢,当然慢也是自己造成的原因,以后搭建的时候不要把这几个目录放在人家hadoop目录下面了,复制起来太久了。这块我已经在搭建手册里面修改了,大家也注意一下!
c.主节点重启集群
完毕!是不是很简单,怎么看上来了没,上8088或者50070
仅供学习参考,有问题麻烦批评指正!