带有Kerberos认证的Kafka

带有Kerberos认证的Kafka

对topic的增删查，生产者消费者的命令

1.需要刷新为Kafka用户进行Kerberos认证

cd /etc/security/keytabs/
[root@bigdata-hadoop-data--1 keytabs]# klist -kt kafka.service.keytab 
Keytab name: FILE:kafka.service.keytab
KVNO Timestamp           Principal
---- ------------------- ------------------------------------------------------
   1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
   1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
   1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
   1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
   1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
kinit -kt kafka.service.keytab kafka/bigdata-hadoop-data--1.novalocal

2.创建topic

 bin/kafka-topics.sh --zookeeper bigdata-hadoop-data--1.novalocal:2181 --create --topic second --replication-factor 1 --partitions 3

这里的bigdata-hadoop-data--1.novalocal:2181以实际为准

--create创建参数，删除改为--delete即可

--topic定义topic名

--replication-factor定义副本数

--partitions定义分区数

3.查看topic的详情

bin/kafka-topics.sh --zookeeper bigdata-hadoop-data--1.novalocal:2181 --describe --topic second

--describe定义描述的参数

4.acl授权

 bin/kafka-acls.sh --authorizer-properties zookeeper.connect=bigdata-hadoop-data--1.novalocal:2181/kafka2 --add --allow-principal User:ffcs_bigdata --producer --topic second

先进行5、6如果能够成功这步就不需要了

5.生产者生产消息

bin/kafka-console-producer.sh --broker-list bigdata-hadoop-data--1.novalocal:6667 --topic second --security-protocol PLAINTEXTSASL --producer-property sasl.mechanism=GSSAPI

6.消费者消费消息

bin/kafka-console-consumer.sh --bootstrap-server bigdata-hadoop-data--1.novalocal:6667 --from-beginning --topic second --security-protocol PLAINTEXTSASL

我在测试生产消费过程中，一直报这个错

提示我没有操作second这个topic的权限

解决方法：就是第一步+第三步，如果第一步执行完，能够执行生产消费过程，就不需要执行第三步

我没有操作second这个topic的权限

解决方法：就是第一步+第三步，如果第一步执行完，能够执行生产消费过程，就不需要执行第三步