超级会员免费看
本文介绍了如何使用Hadoop3.x的YARN Tool接口解决在执行MapReduce任务时遇到的问题。通过一个WordCount案例，演示了在指定队列(root.test)运行任务时出现的路径错误，分析了错误原因，并提出使用Tool接口进行修正。同时，给出了创建Maven项目，添加hadoop-client依赖，以及项目包结构的步骤指导。
然后我们再来看一下yarn的tool接口案例
我们要了解这个tool接口案例是干嘛用的,我们先来看一下我们之前写的一个案例
可以看到wordcount2这个案例,我们指定了
两个参数,可以看到就我new Path(args[0]),以及new Path(args[1]) 可以看到这两个参数,其实就是
指的是,输入,以及输出路径对吧.
这样写了以后,我们在执行命令的时候就可以把,输入输出路径,当成参数传入了对吧.
我们去 http://hadoop102:9870/explorer.html,去看看后台,可以看到
我们先把 input2,output5删除
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
