在idea里运行调试Mapreduce程序,学习中......

目前已知三种方式,前提在VMware中搭建了Hadoop于Linux虚拟机中的运行环境。
1、在Linux中下载Idea并配置maven环境,复制网上代码,在src/main/java文件夹下新建WordcountDriver.class、WordcountMapper.class、WordcountReducer.class,调整configurations确定输入输出文件位置,启动hadoop集群,运行main函数。
在这里插入图片描述
2、在Windows下配置hadoop环境,idea和maven下载并配置好,本地运行测试后可打jar包,复制到linux下的hadoop运行。
参考:有个机车梦的教程
3、在Windows下的Idea中远程连接Linux的HDFS,能够通过HDFS 将文件保存到Windows,也能从Windows将文件上传到HDFS。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值