java.lang.ClassCastException: org.apache.hadoop.hbase.client.Put cannot be cast to org.apache.hadoop.hbase.KeyValue
下面我们来看报错信息
WARN mapred.LocalJobRunner: job_local244116549_0001
java.lang.ClassCastException: org.apache.hadoop.hbase.client.Put cannot be cast to org.apache.hadoop.hbase.KeyValue
at org.apache.hadoop.hbase.mapreduce.KeyValueSortReducer.reduce(KeyValueSortReducer.java:43)
at org.apache.hadoop.hbase.mapreduce.KeyValueSortReducer.reduce(KeyValueSortReducer.java:36)
at org.apache.hadoop.mapreduce.Reducer.run(Reducer.java:164)
at org.apache.hadoop.mapred.ReduceTask.runNewReducer(ReduceTask.java:610)
at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:444)
at org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:449)
异常解决:
这个问题的原因是
HFileOutputFormat2.configureIncrementalLoad(job, myuser, myuserRegion);
在Dirver的这段代码之前要将job的输入路径,输出路径,输出数据类型要先设置好,如果没有设置好输出类型,就会爆出警告,且没有结果数据输出
本文详细解析了在使用HBase和MapReduce进行数据处理时出现的ClassCastException异常,具体为Put对象无法转换为KeyValue。文章指出,异常源于HFileOutputFormat2配置前未正确设置作业的输入路径、输出路径及输出数据类型。正确的设置顺序对于避免此类警告及确保数据正确输出至关重要。
359

被折叠的 条评论
为什么被折叠?



