HBASE 异常 java.lang.ClassCastException: org.apache.hadoop.hbase.client.Put cannot be cast to org.apac

露露大

于 2019-12-19 00:00:00 发布

阅读量2.6k

点赞数 2

CC 4.0 BY-SA版权

分类专栏：大数据技术分享文章标签：大数据技术 HBASE 异常解决

本文链接：https://blog.youkuaiyun.com/l2581218163/article/details/103637579

大数据技术分享专栏收录该内容

11 篇文章

订阅专栏

本文详细解析了在使用HBase和MapReduce进行数据处理时出现的ClassCastException异常，具体为Put对象无法转换为KeyValue。文章指出，异常源于HFileOutputFormat2配置前未正确设置作业的输入路径、输出路径及输出数据类型。正确的设置顺序对于避免此类警告及确保数据正确输出至关重要。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

java.lang.ClassCastException: org.apache.hadoop.hbase.client.Put cannot be cast to org.apache.hadoop.hbase.KeyValue

下面我们来看报错信息

WARN mapred.LocalJobRunner: job_local244116549_0001
java.lang.ClassCastException: org.apache.hadoop.hbase.client.Put cannot be cast to org.apache.hadoop.hbase.KeyValue
    at org.apache.hadoop.hbase.mapreduce.KeyValueSortReducer.reduce(KeyValueSortReducer.java:43)
    at org.apache.hadoop.hbase.mapreduce.KeyValueSortReducer.reduce(KeyValueSortReducer.java:36)
    at org.apache.hadoop.mapreduce.Reducer.run(Reducer.java:164)
    at org.apache.hadoop.mapred.ReduceTask.runNewReducer(ReduceTask.java:610)
    at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:444)
    at org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:449)

异常解决:
这个问题的原因是

HFileOutputFormat2.configureIncrementalLoad(job, myuser, myuserRegion);

在Dirver的这段代码之前要将job的输入路径,输出路径,输出数据类型要先设置好,如果没有设置好输出类型,就会爆出警告,且没有结果数据输出