记录将项目打成jar放到yarn集群环境中运行的过程

本文介绍如何使用IntelliJ IDEA进行Hadoop MapReduce项目的搭建与部署,包括配置项目、构建并运行MapReduce任务的具体步骤。

我用的ide工具软件是intellij idea,故本文章是以该工具来描述步骤:

1、选中项目工程,然后选择intell idea顶部栏目的File--》Project Structure--》Artifacts,在这个界面中,点击+号,出来的界面中,配置项目、Main class等

105459_daCv_3771618.png

105546_x6AT_3771618.png

110330_11H2_3771618.png

110358_j2kX_3771618.png

2、配置好上述步骤后,一直按OK按钮,回到IDE界面,点栏目的build-->build project

110601_tbOf_3771618.png

3、build完成后,在项目的out目录下拷贝jar包到namenode服务器中,然后执行命令:

bin/yarn jar /opt/hadoop/Testmm.jar  com.test.my.WordCount
注意此命令要包括main函数的路径 。

至此,可以成功执行了。

 

 

 

 

 

 

转载于:https://my.oschina.net/u/3771618/blog/1615362

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值