Could not find a deserializer for the Value class: 'org.apache.hadoop.hbase.client.Result

杨鑫newlfe

于 2018-04-21 14:28:20 发布

阅读量1.2k

点赞数

分类专栏： Java 大数据挖掘与大数据应用案例文章标签： Spark HDFS hadoop hbase java

本文链接：https://blog.youkuaiyun.com/u012965373/article/details/80029189

版权

大数据挖掘与大数据应用案例同时被 2 个专栏收录

536 篇文章 ¥9.90 ¥99.00

订阅专栏

Java

427 篇文章

订阅专栏

在使用Spark处理Hbase导出的数据时，遇到错误提示找不到'org.apache.hadoop.hbase.client.Result'的反序列化器。解决方法是在代码中添加配置，将MutationSerialization和ResultSerialization加入到io.serializations中。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

最近在写Spark读取Hbase导出的文件时，常遇到这个问题，报错找不到'org.apache.hadoop.hbase.client.Result。

试了很多种办法，最后是在代码中添加如下：

hbaseConf.setStrings("io.serializations",newString[]{hbaseConf.get("io.serializations"), MutationSerialization.class.getName(), ResultSerialization.class.getName()});

SparkConf sparkConf = new SparkConf().setAppName("yangxin").setMaster(master).set("spark.serializer", "org.apache.spark.serializer.KryoSe

了解本专栏