sqoop import hbase by kerberos安全认证下

最新推荐文章于 2024-01-31 20:30:23 发布

FreyFan

最新推荐文章于 2024-01-31 20:30:23 发布

阅读量598

点赞数

分类专栏： hadoop 文章标签： sqoop import kerberos exception renewer

本文链接：https://blog.youkuaiyun.com/fanchw/article/details/107386588

版权

在使用sqoop import到HBase的过程中遇到Kerberos安全认证异常，问题根源在于tdh-client版本过旧，不匹配升级后的tdh版本。解决方法是下载最新tdh-client并执行init.sh，这样可以成功解决认证问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

2020-07-15 16:30:47,365 ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Can't get Master Kerberos principal for use as renewer
        at org.apache.hadoop.mapreduce.security.TokenCache.obtainTokensForNamenodesInternal(TokenCache.java:116)
        at org.apache.hadoop.mapreduce.security.TokenCache.obtainTokensForNamenodesInternal(TokenCache.java:100)
        at org.apache.hadoop.mapreduce.security.TokenCache.obtainTokensForNamenodes(TokenCache.java:80)
        at org.apache.hadoop.mapreduce.lib.output.FileOutputFormat.checkOutputSpecs(FileOutputFormat.java:142)
        at org.apache.hadoop.mapreduce.JobSubmitter.checkSpecs(JobSubmitter.java:266)
        at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:139)
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290)
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287)
        at java.security.AccessController.doPrivileged(Native Method