我只配置了三台机器,每台机器都是相同的配置。slave机安装hadoop时将namenode的hadoop直接拷贝过去就可以了,不需要改动。
三台机器之间要进行ssh通信,将主机的cygwin\home\Administrator\.ssh目录下id_rsa.pub文件中的内容分别拷贝至slave机器中的cygwin\home\Administrator\.ssh目录下的authorized_keys文件中,之后master就可以和slaves进行ssh通信而不需要密码了。写该hadoop里conf文件中的master和slaves,将三台机器的ip写上去就ok了。
这里需要注意的是如果master之前格式化过需要删除temp文件夹下的所有内容,再重新格式化就不会有什么问题了。
本文介绍了一个简单的Hadoop集群搭建过程,包括配置相同环境的三台机器,并实现它们之间的SSH无密码通信。文中还提到了如何配置master和slaves文件以及注意事项。
713

被折叠的 条评论
为什么被折叠?



