MapReduce报错:Error: java.io.IOException: Initialization of all the collectors failed. Error in last c...

本文分享了一次在Hadoop环境下解决错误import问题的经历,详细介绍了如何通过查看log日志定位并解决错误,包括在Windows下的eclipse中及hadoop目录下的log文件夹中查找相关jobid日志的方法。

 

这个问题折腾了我一天了,最主要的是真的不懂在哪里看log,所以虽然折腾地很没有道理但还是一直在折腾。

这个问题很好解决,在main函数处错误import了 javax.xml.soap.Text,应该import org.apache.hadoop.io.Text

重点写一下怎么查log日志:

两个地方可以查,如果在Windows下的eclipse里面直接连接hadoop,那么就可以里面有一个tmp:

对应的job id里面最后的最长的那个,打开:

查看failed是什么错误。

 

第二种是查看hadoop目录下的log文件夹,里面的userlogs文件包里也是对应的job id的日志。

 

实际上如果原本是windows下运行的,也可以打成jar包放在linux下跑,也可以找到错误:

 

转载于:https://www.cnblogs.com/xym4869/p/8809963.html

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值