hadoop-hdfs常用命令

1.jps

查看进程情况

2.hdfs dfs -ls /xxx

查看hdfs文件系统的xxx文件

3.hadoop fs -mkdir -p /hadoop001/001

创建001文件夹

4.hdfs dfs -cat test.log

查看test.log

5.hadoop fs -put test1.log /hadoop001/001/

上传文件test1.log到001文件夹

6.hdfs dfs -get /hadoop001/001/test1.log /tmp/

下载test1.log到本地tmp文件夹
hadoop fs -get /hadoop001/001/test1.log /tmp/test2.log
重命名为test2.log

7.hdfs dfs -rm -f /xxx

删除xxx文件，进入回收站

8.hadoop fs -rm -f -skipTrash /xxx

删除xxx文件，不进入回收站

9.hdfs dfsadmin -report

查看hdfs的状态信息

10.hdfs dfsadmin -safemode enter

进入安全模式

11.hdfs dfsadmin -safemode leave

离开安全模式

若出现如下信息，则需要退出安全模式
put: Cannot create file/test.log.COPYING. Name node is in safe mode.

12.hdfs balancer

块平衡，磁盘均匀分布
相当于/start-balancer.sh 

需要先设置带宽
hdfs dfsadmin -setBalancerBandwidth 52428800

13.hdfs fsck /

查看目录的块文件是否完整

Corrupt blocks: 100
Missing replicas: 20 (1.0 %) ==:>发邮件给管理员

14.hdfs fsck / -delete

删除/目录下损坏的块

15.hadoop classpath

打印出hadoop的环境变量

---

若泽数据: www.ruozedata.com
交流群: 707635769

---