0571-5.16.1-Redhat7的CDH集群外配置Kerberos环境SUSE12的Gateway节点

本文档详细介绍如何在SUSE 12系统中配置一个非CM管理的Gateway节点,以便向安全模式的CDH集群提交任务和访问数据。包括Kerberos客户端的安装、配置文件的拷贝、环境变量的设置及组件验证过程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1 文档编写目的

在前面的文章中,Fayson介绍过非Kerberos环境下跨操作系统的Gateway节点配置,参考《0567-6.1.0-非Kerberos环境下集群外跨操作系统的Gateway节点配置》。本文档介绍如何在用redhat搭建的带kerberos认证的CDH集群外用suse12系统向安全模式的CDH集群提交任务,访问数据,即在suse12系统中配置一个不被CM管理的gateway节点。

2 前置条件

第一步可依据在为非安全模式的集群添加suse12系统的客户端节点的步骤进行配置,配置完成后执行访问hdfs 的命令会出现如下的报错:

在拷贝配置文件过程中,拷贝每一个服务的配置文件,一定要从有这个服务的角色或者gateway节点上拷贝。

3 配置Kerberos

  1. 安装Kerberos客户端
zypper install krb5-client

  1. 从集群的任意节点中拷贝/etc/krb5.conf配置文件
scp -r cdh4.macro.com:/etc/krb5.conf /etc

  1. 验证

4 配置环境变量

在未配置环境变量前,访问集群时可能仍然出现找不到凭证的问题:

查看缓存的文件位置:

将该地址添加到环境变量中

更新环境变量之后重新访问集群

5 组件验证

  1. 验证hdfs

在目录下创建k.txt文件

在hdfs上新建一个目录/tmp/ktest

将k.txt上传到/tmp/ktest目录下

将本地的a.txt删除,从hdfs上拉取下来并查看

  1. 验证mapreduce
hadoop jar /opt/cloudera/parcels/CDH/jars/hadoop-examples.jar pi 5 5

在控制台上查看,生成了任务

  1. 验证hive

  1. 验证spark

  1. 验证hbase

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值