hadoop-mr运行报错记录

做个坏男人

于 2020-11-19 13:06:44 发布

阅读量365

点赞数

分类专栏：大数据文章标签： hadoop

本文链接：https://blog.youkuaiyun.com/Cheng_May/article/details/109807285

版权

在执行Hadoop MapReduce任务时遇到`java.lang.ClassCastException`，具体为`com.atguigu.reducer.groupomparator.OrderBean`。问题源于OrderBean类未正确实现`WritableComparable`接口。解决方法包括让OrderBean实现`WritableComparable`接口，并重写序列化和反序列化方法，以及`compareTo`方法来确保排序逻辑正确。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

java.lang.ClassCastException: class com.atguigu.reducer.groupomparator.OrderBean
   at java.base/java.lang.Class.asSubclass(Class.java:3769)
   at org.apache.hadoop.mapred.JobConf.getOutputKeyComparator(JobConf.java:887)
   at org.apache.hadoop.mapred.MapTask$MapOutputBuffer.init(MapTask.java:1004)
   at org.apache.hadoop.mapred.MapTask.createSortingCollector(MapTask.java:402)
   at org.apache.hadoop.mapred.MapTask.access$100(MapTask.java:81)
   at org.apache.hadoop.mapred.MapTask$NewOutputCollector.<init>(MapTask.java:698)
   at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:770)
   at org.apache.hadoop.mapred.MapTask.run(MapTask.java:341)
   at org.apache.hadoop.mapred.LocalJobRunner$Job$MapTaskRunnable.run(LocalJobRunner.java:243)
   at java.base/java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:515)
   at java.base/java.util.concurrent.FutureTask.run(FutureTask.java:26

最低0.47元/天解锁文章