Hadoop入门总结

本文详细介绍了Hadoop集群的配置过程,包括静态IP、hosts和hostname的一致性配置,ssh密钥生成与公钥传输,解决Namenode开机格式化问题,以及xxx-site.xml的配置方法。同时,还讲解了通过软链接实现三种配置方式的并存使用,并提供了Hadoop文件系统操作、格式化及端口查看等实用命令。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

问题1:静态ip配置  配置hosts   配置hostname  要一致

问题2 :ssh生成与公钥传输

问题3:namenode每次开机格式化问题

问题4:xxx-site.xml配置

问题5:三种方式并存 使用软链接

 

常用命令

查看 hadoop文件系统 :  hadoop fs -ls /

格式化 : hadoop namenode -format

查看端口:$ netstat -ano | more          

                8020端口  

                50070 :webui端口

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值