本文深入解析了Hadoop FS命令，包括如何使用`hadoop fsck`检查文件副本数、通过`http://namenode IP地址:50070/`和`http://namenode IP地址:50030/`浏览和查看MapReduce任务，以及`hadoopfs-getmerge`命令用于合并HDFS文件块。详细指导了在本地路径合并HDFS文件的方法，并提供了关键步骤和注意事项。
- hadoop fsck -locations [/path] 打印文件实际副本数/文件块信息等 path要用绝对路径
- http://namenode IP地址:50070/ 从浏览器中浏览文件
- http://namenode IP地址:50030/ 从浏览器中查看MapReduce任务
- hadoop fs -getmerge <src> <localdst> [addnl] 将hdfs中目标文件夹中的文件块合并后存在本地路径localdst，addnl可选，用于指定在每个文件之后添加一个换行符
转载于:https://www.cnblogs.com/siwei1988/archive/2012/07/25/2608189.html
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
