Hadoop集群增加节点不删数据详细操作步骤

本文介绍了如何在已有Hadoop集群基础上快速扩容,不删除数据地增加新节点。步骤包括:配置主节点名、设置hosts、关闭防火墙、时间同步、配置ssh无密码访问、安装相同版本的jdk和hadoop。在安装hadoop时,需复制hadoop文件夹,删除新节点中的旧数据,并在主节点重启集群。注意避免将数据目录置于hadoop目录下,以减少复制时间。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

首先说一下这篇文章:

得先有个Hadoop集群,对于如何搭建请移步博主另一篇文章:

超详细的Hadoop集群部署_Alex_81D的博客-优快云博客

今天主要说说当节点不够时,如何快速扩容,一会会儿就搞定了,上步骤:

前面这些步骤跟上面一样,我就不细说了

1.配置主节点名hadoop4

2.配置hosts

3.关闭防火墙

4.时间同步

5.配置ssh无密码访问(这步很关键,认真一点)

6.jdk安装(跟之前一样,同目录,免得改东西)

7.安装hadoop

a.复制hadoop文件夹(配置新的hadoop_home)

b.删除新机器中a复制过来的文件数据

这个意思是,删除之前配置的目录地址中数据

当然我要说一下这个问题

这块对于一个用了很久的集群建议还是不要直接scp整个目录了,有可能会很慢,当然慢也是自己造成的原因,以后搭建的时候不要把这几个目录放在人家hadoop目录下面了,复制起来太久了。这块我已经在搭建手册里面修改了,大家也注意一下!

 c.主节点重启集群

完毕!是不是很简单,怎么看上来了没,上8088或者50070

 

 仅供学习参考,有问题麻烦批评指正!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Alex_81D

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值