hadoop 1.2.1 完全分布式安装注意要点

完成了伪分布安装后，只要拷贝虚拟机并修改少量配置文件即可以变成完全分布式安装。这里其他文章说的很多了，可以参考http://wenku.baidu.com/link?url=YI4bx-u2y2oCRUxTVHiVkFCNg1MoklPoXUKJAiL209Tg_FEl4TekuDp6pYHkDqg48cyGruTR1hWcbaC8Krs6tnymAhARi9Nb2J9RyLILFua

 

但是这里要注意以下几点：

1. 因为是拷贝复制的节点，所以网卡MAC地址是一样的，就不能同时打开几个虚拟机进行连接，一定要修改MAC地址，如图：

 

2. 虚拟机的网关地址要配置成虚拟网卡的IP地址，不是虚拟网络编辑器>NAT设置>网关IP，这样各个节点之间可以ping通，和宿主机也可以互相ping通。

 

3.  执行start-all.sh 后，可能会发现节点datanode没有启动，解决方法如下：

A. 修改所有配置文件在使用虚拟机别名的地方，比如master，slave1，slave2... 改成IP地址

B. 在重新format namenode之前，要清空所有节点的tmp目录中，不仅仅是namenode。

 

有一点觉得奇怪，所有的ssh免密码访问，都只谈了从namenode到datanode的免密码访问，反过来从datanode到namenode不需要吗？似乎不妨碍hadoop启动。