手动启停集群与集群使用

一、手动启动和停止集群节点
1、手动启动和停止hdfs节点
*启动
在master上：hadoop-daemon.sh start namenode
在三台主机：hadoop-daemon.sh start datanode
在slave1上：hadoop-daemon.sh start secondarynamenode
*停止
在master上：hadoop-daemon.sh stop namenode
在三台主机：hadoop-daemon.sh stop datanode
在slave1上：hadoop-daemon.sh stop secondarynamenode
2、手动启动和停止yarn节点
*启动
在master上：yarn-daemon.sh start resourcemanager
在三台主机：yarn-daemon.sh start nodemanager
停止
在master上：yarn-daemon.sh stop resourcemanager
在三台主机：yarn-daemon.sh stop nodemanager
3、查看日志文件
cd /usr/hadoop/hadoop-2.7.3/logs
查看.log文件
二、在hdfs文件系统上操作
1、新建目录
hadoop fs -mkdir /dsj20301
2、浏览根目录
hadoop fs -ls /
3、新建文件并上传
（1）新建
echo 123456 >> 1.txt
（2）上传
hadoop fs -put 1.txt /dsj20301
（3）浏览是否存在
hadoop fs -ls /dsj20301
（4）查看文件内容
hadoop fs -cat /dsj20301/1.txt
三、在集群上运行mapreduce示例程序
cd /usr/hadoop/hadoop-2.7.3/share/hadoop/mapreduce
hadoop jar hadoop-mapreduce-examples-2.7.3.jar pi 10 200
PS:文章中的hadoop-2.7.3是我自己的hadoop部署的版本。