大数据——使用windows下的Eclipse或者IDEA远程连接Linux的Hadoop并运行wordcount

这篇博客记录了初学者如何在Windows下使用Eclipse或IDEA远程连接Linux上的Hadoop环境,执行WordCount MapReduce程序。博主详细描述了环境配置、遇到的问题及解决方案,包括配置文件、权限问题、DLL位置、缺少的jar包等,并给出了相应的参考资料。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

初学大数据,经过三个多小时,最终照着网上案例弄出来了!

下面是结果:

 

 

 

遇到的问题还真的多!下面就以随笔的形式,将制作过程和问题及解决记录下来:

1.环境准备:

  1. 用远程ssh工具启动搭建好的Hadoop平台(不管伪分布式/完全分布式都可以),看是否能正常启动hdfs,mapreduce
  2. 将Linux系统中安装的Hadoop初始安装包拷贝到Windows系统一份(版本一样),解压到自定义目录
  3. 下面就配置环
评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值