基于cdh的Kafka配置及部署（详细，成功运行）

最新推荐文章于 2025-04-03 22:15:05 发布

weixin_34220834

最新推荐文章于 2025-04-03 22:15:05 发布

阅读量5.6k

点赞数

文章标签：大数据 java scala

原文链接：http://blog.51cto.com/14309075/2403616

版权

本文档详细介绍了如何在CDH平台上配置和部署Kafka，包括从指定网址下载Kafka，校验文件完整性，解压并设置软链接，理解重要目录结构，修改配置文件以解决启动时的配置文件找不到问题，最终成功启动Kafka服务。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、下载

http://archive.cloudera.com/kafka/parcels/2.2.0/

wget http://archive.cloudera.com/kafka/parcels/2.2.0/KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel
wget http://archive.cloudera.com/kafka/parcels/2.2.0/KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel.sha1

二、校验

[hadoop@hadoop003 softwares]$ sha1sum KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel
359509e028ae91a2a082adfad5f64596b63ea750  KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel

[hadoop@hadoop003 softwares]$ cat KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel.sha1
359509e028ae91a2a082adfad5f64596b63ea750

校验码相同，说明文件在下载过程中没有任何损坏，可正常使用

三、解压并设置软连接

[hadoop@hadoop003 softwares]$ tar -zxf  KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel -C ~/app
[hadoop@hadoop003 app]$ ln -s /home/hadoop/app/KAFKA-2.2.0-1.2.2.0.p0.68/ /home/hadoop/app/kafka

四、重要目录说明

[hadoop@hadoop003 kafka]$ pwd
/home/hadoop/app/kafka
[hadoop@hadoop003 kafka]$ ll
total 20
drwxr-xr-x 2 hadoop hadoop 4096 Jul  7  2017 bin
drwxr-xr-x 5 hadoop hadoop 4096 Jul  7  2017 etc
drwxr-xr-x 3 hadoop hadoop 4096 Jul  7  2017 lib
drwxr-xr-x 2

最低0.47元/天解锁文章