0433-Kerberos环境下Impala Daemon在CDH5.15版本中KRPC端口27000异常分析

CDH集群Kerberos认证异常解决
最新推荐文章于 2022-09-23 18:08:24 发布
原创 最新推荐文章于 2022-09-23 18:08:24 发布 · 845 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文解决CDH集群升级至5.15并启用Kerberos后，使用impala-shell执行SQL操作出现的Not authorized异常。通过在krb.conf中设置rdns=true，确保Kerberosprincipal使用正确的主机名。

温馨提示：如果使用电脑查看图片不清晰，可以使用手机打开文章单击文中的图片放大查看高清原图。
Fayson的github：
https://github.com/fayson/cdhproject
提示：代码块部分可以左右滑动查看噢

1.问题描述

CDH集群升级至5.15并且启用Kerberos的情况下，在命令行使用impala-shell执行SQL操作会报如下异常：

[cdh01.fayson.com:25003] > select count(*) from ods_user;
Query: select count(
最低0.47元/天 解锁文章
涅槃重生：KRPC 实现 Impala 的飞跃
01-07
据不完全统计，在生产环境中部署 Impala 集群时，大部分大数据工程师也会赠送一套 Kudu 环境，当然用不用另说。如果只部署了 Impala 而没有 Kudu，那应该是一个意外。如果部署了 Kudu，而没有 Impala，说明用户都是高手，喜欢有挑战性的工作。当然如果没有 Impala 和 Kudu，就很正常了，因为可能用了 Presto、Clickhouse 或 Doris 等。 今天笔者给大家带来一篇借助 Kudu 来提升 Impala 稳定性和吞吐量的文章，素材来自 Cloudera 工程师在 Strata Data Conference 2019 大会上分享的主题，《Acceler
impala相关的端口
陈小哥cw
11-19 868
下表中列出了 Impala 使用的 TCP 端口。部署Impala之前，请确保在每个系统上打开这些端口。您可以使用相应的启动标签来覆盖默认端口。 参考http://impala.apache.org/docs/build/html/topics/impala_ports.html#ports 组件 服务 启动标签 端口 访问需求 备注 Impala Daemon Impala 守护进程前端端口 –beeswax_port 21000 外部 被 impala-shell, Beeswax,
Impala 使用的端口
weixin_34370347的博客
12-16 387
下表中列出了 Impala 是用的 TCP 端口。在部署 Impala 之前，请确保每个系统上这些端口都是打开的。 组件服务端口访问需求备注 Impala Daemon Impala 守护进程前端端口 21000 外部 被 impala-shell, Beeswax, Cloudera ODBC 1.2 驱动 用于传递命令和接收结果。参见 Configuring Im...
Impala使用的端口
weixin_38023225的博客
06-02 2735
组件 服务 端口 访问需求   备注 Impala Daemon Impala Daemon Frontend Port 21000 外部 被 impala-shell, Beeswax, Cloudera ODBC 1.2 驱动 用于传递命令和接收结果 Impala Daemon Impala Daemon Frontend Port 21050 外部 被使用 JDBC 或 Cloudera ODBC 2.0 及以上驱动的诸如
Impala 端口列表
vkingnew 的技术博客
11-23 923
Scope / Role Startup Flag Default Port Comment Impala Daemon --beeswax_port 21000 Port on which Beeswax client requests are served by Impala Daemons. Impala Daemon --hs2_port 21050 Port on which HiveServer2 client requests are served by Impala Daemons. Im.
impala添加kerberos认证
jzy3711的博客
09-23 1215
7.将 Kerberos 选项添加到 Impala 默认文件 /etc/default/impala。1.创建kerberos Impala 服务主体，指定运行 Impala 守护程序的操作系统用户的名称、运行 impalad的每个节点的完全限定域名以及领域名称。有关更改 /etc/default/impala中指定的 Impala 默认值的更多信息，请参阅 修改 Impala 启动选项。解决：创建kerberos Impala 服务主体和生成的keytab文件必须要有节点的完全限定域名以及领域名称例如。
JAVA 配置 Impala kerberos DataSource 生成自定义数据源
JeromeLucky的博客
07-16 1201
kerberos认证 参考 关键概念 1. principal 认证的主体，简单来说就是"用户名" 2. realm realm有点像编程语言中的namespace。在编程语言中，变量名只有在某个"namespace"里才有意义。同样的，一个principal只有在某个realm下才有意义。 所以realm可以看成是principal的一个"容器"或者"空间"。相对应的，principal的命名规则是"what_name_you_like@realm"。 在kerberos, 大家都约定成俗用大写来命名re
CDH6.3.2 配置LDAP+kerberos
h952520296的博客
04-08 2800
本文主要记录 cdhhadoop集群集成 ldap 的过程，这里 ldap 安装的是 OpenLDAP 。LDAP 用来做账号管理，Kerberos作为认证。授权一般由Sentry来决定的。 集群包括7个节点，每个节点的ip、主机名和部署的组件分配如下： 192.168.0.200 master Kerberos KDC 、OpenLDAP 192.168.0.201 slave1 kerberos client、ldap client 192.168.0.202 s..
Impala-shell卡顿分析——记一次曲折的Debug经历
Stiga Huang的专栏
11-08 1733
最近遇到一个impala-shell在处理中文字符时卡死不动的bug，整个Debug过程比较曲折，因为一开始走错了方向。最终是通过监听TCP层的传输找到切入点，从而走上正规，找到底层依赖库的一个bug，从而修复了问题。这篇文章尽量回忆整个Debug过程，以给自己一个警示作用。有点流水帐的味道，大家看看就好。...
Impala SQL常见报错问题排查与解决记录
lonelymanontheway的博客
03-11 1万+
CDH 7.1.7版本enable关键词导致语法失败；Invalid query handle；SQLException: Sender timed out waiting for receiver fragment instance:dest node；SQLException: Cancelled；Cancelled from Impala's debug web interface；
connect() failed (111: Connection refused) while connecting to upstream问题处理
热门推荐
企业实战系列集 ●●● https://ximenjianxue.blog.youkuaiyun.com
03-04 5万+
【问题描述】 今天巡检Web服务器时，发现Nginx的error日志里，有许多报错信息，其中有一条如下显示： [error] 2334#2334: *253268 connect() failed (111: Connection refused) while connecting to upstream, client: 172.12.23.44, server: 212.65.12.29, r...
impala故障（cdh5.15.1版本）
CODE男孩的博客
02-14 1769
今天碰到一个很奇怪的问题，impala查询34亿条数据报错，不过多亏网上有神仙相助，少了一个插件，具体原因有待思考，，，问题是原创的，解决方案是大神提供的 [cdh004:21000] > select count(*) from impala_100yi; Query: select count(*) from impala_100yi Query submitted at: 2019-...
CDH 集群Impala-Shell 获取不到数据及相关问题
Nice的博客
05-11 1315
错误描述：在CDH 界面安装Impala 服务之后，进入到服务器的Impala-shell中运行查询语句获取不到数据 控制台运行查询打印信息如下： [hddatanode02:21000] test> select * from test.ods_cdp_data_explore; Query: select * from test.ods_cdp_data_explore Query submitted at: 2021-05-11 12:37:59 (Coordinator: http://hdd
Nginx 的recv() failed 错误解决一例
weixin_33875839的博客
03-13 1391
本篇文章来源于 Linux公社网站(www.linuxidc.com) 原文链接：http://www.linuxidc.com/Linux/2012-11/75149.htm L同学又一次把socket连接往错误的端口上连了。搬完办公室，D同学说端口有点乱，一台开发机上3个游戏，端口范围不规范，于是就定了下各个游戏的端口区间，负载其中一款游戏的L同学就开始修改端口了。修改...
kudu-python安装
MacwinWin的博客
04-17 2568
对kudu数据库进行CUID操作可以通过impala或者直接连接kudu库，前者有impyla的python包，但速度较慢，后者有kudu-python包，速度我目前还不清楚，但猜测应该会快。 impyla的使用较简单，最近想通过kudu-python进行连接，但仅仅是完成了kudu-python的安装，并没有完成连接，有待继续研究。 官方给的安装说明中，貌似是将kudu服务端、客户端、kudu-...
Impala查询报错
jast
09-25 3977
[test:21000] default> select * from tt_user where key like '1%' limit 1; Query: select * from tt_user where key like '1%' limit 1 Query submitted at: 2018-09-25 10:47:53 (Coordinator: http://test:...
Nginx的connect() failed 错误解决
Sunny
11-14 2万+
最近网站打开总是异常，网站会偶尔死掉，我用的是阿里云的一台低配linux服务器，第一想法就是登陆进去查看日志 [error] 7120#0: *7779 connect() failed (111: Connection refused) while connecting to upstream, client: xxx, server: xxx, request: "GET xxx H
CDH5.15 Kerberos+Sentry在CentOS 6.5中的启用教程
本文档是一份详细的指南，介绍了如何在CentOS 6.5环境中设置和配置CDH 5.15以支持Kerberos和Sentry安全机制。该过程分为几个关键步骤，确保了平台的安全性和认证/授权流程的正确实施。 首先，从安装KDC服务开始，即...
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值