假设在你的hdfs集群上有一个/user/hadoop/output目录
里面有作业执行的结果(多个文件组成)part-000000,part-000001,part-000002
然后你想把所有的文件合拢来一起看 可以使用命令:hadoop fs -getmerge /user/hadoop/output local_file
然后就可以在本地使用vi local_file查看内容了
本文介绍如何使用Hadoop命令将HDFS集群上的多个作业输出文件合并为一个文件,并在本地查看合并后的文件内容。
假设在你的hdfs集群上有一个/user/hadoop/output目录
里面有作业执行的结果(多个文件组成)part-000000,part-000001,part-000002
然后你想把所有的文件合拢来一起看 可以使用命令:hadoop fs -getmerge /user/hadoop/output local_file
然后就可以在本地使用vi local_file查看内容了
您可能感兴趣的与本文相关的镜像
Qwen3-8B
Qwen3 是 Qwen 系列中的最新一代大型语言模型,提供了一整套密集型和专家混合(MoE)模型。基于广泛的训练,Qwen3 在推理、指令执行、代理能力和多语言支持方面取得了突破性进展
5970
4180
312
576
4797
2607

被折叠的 条评论
为什么被折叠?