wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决

本文介绍了一个常见的Hadoop MapReduce错误“wrongkeyclassorg.apache.hadoop.io.Textisnotclassorg.apache.hadoop.io.LongWritable”的解决方法。通过调整输出类型设置,解决了输入输出类型不匹配的问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable:已解决

问题描述

报错信息:wrong key class org.apache.hadoop.io.Text is not class org.apache.hadoop.io.LongWritable,如下图所示。

在这里插入图片描述

在这里插入图片描述

遇到这样的报错,产生的结果是:程序是执行完成的,也生成了目录文件,但是想要的结果文件是没有的

解决方法

错误信息显示输入输出类型不匹配,我们需要将这下面行代码注释掉

job.setReducerClass(CombinReduce.class);

并去将输出的方法修改,原本的代码,如下

job.setMapOutputKeyClass(Text.class);
job.setMapOutputValueClass(Text.class);

修改后的代码,如下

job.setOutputKeyClass(Text.class);
job.setOutputValueClass(Text.class);

注意:

当K2, V2 和K3 , V3类型一致时,只需要使用setOutputKeyClass和setOutputValueClass来设置输出类型即可。

当K2, V2 和K3 , V3类型不一致时,我们才需要用setMapOutputKeyClass和setMapOutputValueClass来设置map的输出类型

我们这里将setMapOutputKeyClass替换为setOutputKeyClass输出方法,如下图所示,便可以成功运行了

在这里插入图片描述

我们想要的文件也出来了,如下图所示。

在这里插入图片描述

文章参考

http://t.csdn.cn/aVVFO
http://t.csdn.cn/TI5vu


以上就是本文全部内容,如果它对您有帮助,请您帮我点个赞,这对我真的很重要

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值