Hadoop环境部署（单节点和集群）

1、单节点环境搭建步骤：

http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html

2、集群环境搭建步骤：

http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/ClusterSetup.html

3、Hadoop启动与测试

–格式化namenode

 -hadoop namenode -format

 -start-all.sh

–管理页面

  http://master:50070/

  http://master:50030/

–测试命令

•cd/opt/modules/hadoop-0.20.2-cdh3u6

•bin/hadoopjar hadoop-examples-0.20.2-cdh3u6.jar pi 10 100

常见问题：

问题1：采用虚拟机搭建Hadoop环境，每次虚拟机重启后，Hadoop无法启动成功。
解决方案：
在core-site.xml中增加以下两个配置：
<property>
<name>dfs.namenode.name.dir</name>
<value>/home/alan/hadoop/dfs/name</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/home/alan/hadoop/dfs/data</value>
</property>
其中，各个目录一定是非/tmp下的目录