二十：CDH5.14离线安装kafka (含版本选择)

最新推荐文章于 2023-09-11 14:38:32 发布
原创 最新推荐文章于 2023-09-11 14:38:32 发布 · 3.5k 阅读 · 5 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了如何在已安装CDH的Hadoop环境中，通过Parcel方式离线安装Kafka。首先，从Cloudera官网下载Kafka的parcel文件，然后配置CDH的Kafka源，分配并激活parcel，最后完成CDH服务中Kafka的配置。

一：当安装好CDH的hadoop后，准备安装kafka,可是CDH上添加服务是这样的，没法直接添加，需要添加相应包才可以：

Apache Kafka is publish-subscribe messaging rethought as a distributed commit log. Before adding this service, ensure that either the Kafka parcel is activated or the Kafka package is installed.

一切从官网开始：

https://www.cloudera.com/documentation.html
在这里插入图片描述

二：按安装向导选择从Parcel安装：

https://www.cloudera.com/documentation/kafka/latest/topics/kafka_installing.html#concept_m2t_d45_4r
在这里插入图片描述

2.1按步骤进入：

最低0.47元/天 解锁文章
CDH 离线安装kafka
邢宁
02-19 1485
一、安装准备 1、下载csd包 wget http://archive.cloudera.com/csds/kafka/KAFKA-1.2.0.jar 2、下载parcel包 wget http://archive.cloudera.com/kafka/parcels/2.1.1/KAFKA-2.1.1-1.2.1.1.p0.18-el7.parcel wget http://archive.cloudera.com/kafka/parcels/2.1.1/KAFKA-2.1.1-1.2.1.1.p0.1
CDH大数据平台搭建之KAFKA集群搭建
qq_41924766的博客
06-15 1293
CHD大数据平台搭建之KAFKA安装一、安装规划二、下载KAFKA三、安装及配置1、先安装zookeeper2、解压3、新建文件夹4、修改config目录server.properties文件5、配置环境变量6、分发文件四、启动1、启动命令2、验证总结 一、安装规划 请参考CHD大数据平台搭建之集群规划 二、下载KAFKA 1.官网下载 2.网盘下载 提取码：cdh5 注意事项：网盘的是配套的scala和kafka，自行下载注意版本要匹配 三、安装及配置 1、先安装zookeeper 请参考CHD大数据
CDH5.14安装文档(包含spark2和kafka的安装)
03-30
CDH5.14安装文档(包含spark2和kafka的安装)
读取topic，查看有哪些topic，删除topic,创建topic生产者
weixin_45762425的博客
12-13 1777
kafka-console-consumer --bootstrap-server localhost:9092 --topic three --from-beginning kafka-topics --list --zookeeper localhost:2181
CDH安装Kafka, 简称CDK安装（图解安装）
阿顾的博客
10-24 4968
文章目录一 下载包裹文件二 安装httpd三 对parcel进行分发和激活四 添加服务五 测试数据 一 下载包裹文件 http://archive.cloudera.com/kafka/parcels/4.1.0/ 创建下载的目录，并cd进去 mkdir kafka_parcel cd kafka_parcel 下载三个文件 wget http://archive.cloudera.com/k...
离线安装指南：CDH5.14.x on Centos7.4（含Spark2和Kafka）
"CDH5.14安装文档包含在Centos7.4上离线安装CDH5.14.x的步骤，以及Spark2和Kafka的安装指南。提供了所有必要的软件下载链接，包括JDK、MySQL驱动、Cloudera Manager安装包、CDH parcel及相关校验文件，以及角色分配...
rhel6.5+CDH5.14+CM 2台集群安装说明
whn360的专栏
02-13 1686
声明： 本文是本人经过N次安装实验后整理编写，安装配置过程中参考了大量的网上资料，正文中也有引用，在此表示感谢！因为自己安装配置经历比较坎坷，长达2个月坚持不懈的努力（跨过元旦、春节），总算把基础环境搭建起来了。这里也记录了自己安装配置过程中遇到的所有问题与解决办法。希望后边学习的人，能在此文的帮助下，顺利的搭建好测试环境。如有错误，还请谅解指正，谢谢！ rhel6.5+CDH5.14+CM 2台...
CentOS7安装CDH 第九章：CDH中安装Kafka
weixin_30929011的博客
05-15 322
相关文章链接 CentOS7安装CDH 第一章：CentOS7系统安装 CentOS7安装CDH 第二章：CentOS7各个软件安装和启动 CentOS7安装CDH 第三章：CDH中的问题和解决方法 CentOS7安装CDH 第四章：CDH的版本选择和安装方式 CentOS7安装CDH 第五章：CDH的安装和部署-CDH5.7.0 CentOS7安装CDH 第六章：CDH的管理-CDH...
CDH kafka
winggyn的专栏
09-11 729
2、将上面的三个文件上传到该目录下，并将KAFKA-4.1.0-1.4.1.0.p0.4-el7.parcel.sha1重命名为KAFKA-4.1.0-1.4.1.0.p0.4-el7.parcel.sha。在CDH上集成Kafka，要求用CDH上的Zookeeper管理Kafka。1、在/var/www/html/（http服务的默认目录）新建文件夹kafka_parcel。简要说明：例如kafka_2.11-2.2.1-kafka-4.1.0.jar。Kafka parcel**完成！
CDH集成kafka
yunqishequ1的博客
06-27 928
添加kafka（把包放到cm主机目录）  1.下载kafka包http://archive.cloudera.com/kafka/parcels/latest/   把包放到parcel-repo 目录2.下载csd包http://archive.cloudera.com/csds/kafka/放到csd目录3.分配kafka包并激活注意：如果进度卡在“已解压”，直接返回重新进来就会看到“激活”4...
cdh安装kafka
y919610545的博客
07-05 929
1、下载kafka包裹文件到你的一个节点。 http://archive.cloudera.com/kafka/parcels/4.1.0/ 根据你自己的linux和cdh版本来确定kafka版本，下载KAFKA-4.1.0-1.4.1.0.p0.4-el7.parcel，KAFKA-4.1.0-1.4.1.0.p0.4-el7.parcel.sha1，manifest.json到kafka_parcel目录下 2、安装httpd，并启动http，将包裹文件的文件夹移动到httpd的目录下，并将KAFKA-
CDH安装kafka
weixin_30838921的博客
10-24 203
摘要：前言其实cloudera已经做了这个事了,只是把kafka的包和cdh的parcel包分离了,只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了,就可以实现完美集成了。具体实现的简要步骤可参照cloudera官网提供的文档:http://www.cloudera.com/content/www/en-us/documentation/kafka/lates...
CDH5.14.X安装Kafka过程（Kafka版本选择的过程）
热门推荐
BigData_Mining的博客
06-29 1万+
CDH5.14安装Kafka过程：在CDH官网中关于Kafka的安装和升级中已经说到，在CDH中，Kafka作为一个分布式的parcel，单独出来作为parcel分发安装包。只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了，就可以实现完美集成了。注意集成之前请阅读官方文档，特别是版本支持方面。查看kafka与CDH版本对应：https://www.cloudera.com/...
cdh 安装_CDH安装Kafka, 简称CDK安装（图解安装）
weixin_39626298的博客
11-28 338
一、下载包裹文件http://archive.cloudera.com/kafka/parcels/4.1.0/创建下载的目录，并cd进去mkdir kafka_parcelcd kafka_parcel下载三个文件下载完成后，把.sha1改成.shamv KAFKA-4.1.0-1.4.1.0.p0.4-el7.parcel.sha1 KAFKA-4.1.0-1.4.1.0.p0.4-el7.p...
CDH5.10 安装Kafka
小苟的专栏
05-07 482
官网地址https://www.cloudera.com/documentation/kafka/latest/topics/kafka_packaging.html下载2.2.0的版本我用的是centos6就下载6的，三个文件都下载下载好的文件以及路径校验一下下载的文件是否是完整，如果不完整也会安装不成功选择parcel，添加kafka的路径保存以后会自动检测，点击download然后每台机器分...
CDH5.16.2安装Kafka4.1.0
weixin_44675844的博客
11-12 699
安装Kafka，需要下载Parcel包 Kafka.parcel下载地址：http://archive.cloudera.com/kafka/parcels/4.1.0/ 安装过程 将下面的三个文件上传到/opt/cloudera/parcel-repo目录下 把sha1改成sha 在7180页面进行解压和激活Kafka服务 ...
CDH添加kafka
nieji3057的博客
03-24 2028
安装 Kafka 组件配置 Kafka parcel 包在 Web 页面中，主机 -> Parcel  里面会列出当前集群以配置和分配的 parcel 包，目前只配置了 CDH5，Kafka 单独存在于其他 parcel 包中，所以需要单独加载 parcel ，然后分配到集群内各节点。  Cloudera官方Kafka组件的parcel包下载地址为：http://archive.cloude...
基于zookeeper-3.4.5-cdh5.7.1的kafka_2.9.2-0.8.1.1的安装
jxb116的博客
07-29 1282
环境为zookeeper-3.4.5-cdh5.7.1安装调试完毕并启动 slave0 slave1 slave2共三台虚拟机 1)下载KAFKA     $ wget http://apache.fayea.com/apache-mirror/kafka/0.8.1.1/kafka_2.9.2-0.8.1.1.tgz 2)配置$KAFKA_HOME/config/server
CDH安装kafka组件启动失败
weixin_43171988的博客
11-09 945
Configured broker.id 465 doesn't match stored broker.id 274 in meta.properties
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值