CDH5.14.X安装Kafka过程（Kafka版本选择的过程）

最新推荐文章于 2020-09-04 16:50:36 发布
转载 最新推荐文章于 2020-09-04 16:50:36 发布 · 583 阅读 · 0

本文详细记录了在CDH5.14.X环境下安装Kafka时遇到的问题及解决方法，包括处理Kafka安装包未被发现、jar文件执行权限缺失、配置文件中DestinationBrokersList和SourceBrokersList填写技巧等内容。

CDH5.14.X安装Kafka过程（Kafka版本选择的过程)
在安装过程种，CDH 无法发现Kafka安装包，jar没有赋予执行权限。所以对jar包执行chmod 执行权限后，就发现了安装包。

点继续，出现错误“修复验证错误以允许保存”。解决办法：修改配置文件：
填写Destination Brokers List
master:9092,slave1:9092,slave2:9092,slave3:9092,slave4:9092
填写Source Brokers List
master:9092,slave1:9092,slave2:9092,slave3:9092,slave4:9092

sunseaxhj
关注
二十：CDH5.14离线安装kafka (含版本选择)
weizhonggui的博客
02-23 3545
一：当安装好CDH的hadoop后，准备安装kafka,可是CDH上添加服务是这样的，没法直接添加，需要添加相应包才可以： Apache Kafka is publish-subscribe messaging rethought as a distributed commit log. Before adding this service, ensure that either the Kafk...
CDH 离线安装kafka
邢宁
02-19 1485
一、安装准备 1、下载csd包 wget http://archive.cloudera.com/csds/kafka/KAFKA-1.2.0.jar 2、下载parcel包 wget http://archive.cloudera.com/kafka/parcels/2.1.1/KAFKA-2.1.1-1.2.1.1.p0.18-el7.parcel wget http://archive.cloudera.com/kafka/parcels/2.1.1/KAFKA-2.1.1-1.2.1.1.p0.1
CDH 离线安装Kafka
Java大数据
10-24 654
前面已经介绍过了离线部署CDH5.16.1 企业真正离线部署CDH5.16.1 准备工作：先选择好自己对应的CDK版本，然后下载好然后上传到cdh 集群 parcels 安装文档 添加链接描述 el 7代表centos7，下载好之后将 .sha1中的1去除掉 接下来： # 验证下载的kafka是否完好 [root@hadoop003 Kafka_parcels]# sha1sum KAFKA-...
CDH 5.13.2集成 Kafka manager已编译(正式环境已测试)
05-05
sbt已经编译，正式环境编译好的kafka manager，可以直接用
CDH安装Kafka
博客
12-02 2830
环境：三台机器（CentOS6.5） CDH：5.7.0 下载parcel包 CDH的parcel包中不含有Kafka，需要单独下载 http://archive.cloudera.com/kafka/parcels/ 在这里选择版本 对于不同的CDH版本，对应的Kafka版本也不同 官网给出的对应关系： 注意Kafka所对应的系统， EL6 is the download for Red H...
CDH5.14安装文档(包含spark2和kafka的安装)
03-30
在这个CDH5.14的安装过程中，我们将关注如何在CentOS7.4环境下离线安装CDH，同时包括Spark2和Kafka。 首先，你需要下载以下组件： 1. JDK：这是Java Development Kit，用于运行和开发Java应用程序，CDH中的服务依赖...
离线安装指南：CDH5.14.x on Centos7.4（含Spark2和Kafka）
"CDH5.14安装文档包含在Centos7.4上离线安装CDH5.14.x的步骤，以及Spark2和Kafka的安装指南。提供了所有必要的软件下载链接，包括JDK、MySQL驱动、Cloudera Manager安装包、CDH parcel及相关校验文件，以及角色分配...
Cloudera Manager 5.14.X 安装部署（中）
留不住斜阳的博客
09-04 602
安装Server和Agent 方式一（path A installer-采用嵌入式PostgreSQL数据库） 前置条件：（CM集群每个节点都要实现） ​ 1）修改系统文件句柄数； ​ 2）修改swap交换区空间； ​ 3）禁用hugepage透明大页； ​ 4）关闭防火墙和selinux； ​ 5）修改主机名和映射文件； ​ 6）实现免秘钥登录； ​ 7）搭建共享源； ​ 8）配置好ntp时间同步服务； ​ 9）安装JDK； 1. 安装CM Agent
CDH集成kafka方法实践
TURING.DT
09-05 8230
（本文以KAFKA-2.0.2-1.2.0.2.p0.5-el6.parcel和CDH5.5.1版本截图，最后出现兼容问题，将KAFKA-2.0.2-1.2.0.2.p0.5-el6.parcel换为KAFKA-0.8.2.0-1.kafka1.4.0.p0.56-el6.parcel就正常，请大家先查看版本兼容问题） 参考CDH官网文档：http://www.cloudera.com/cont
CDH5.13.1安装kafka服务
zxz306418932的博客
07-19 999
CDH5.13.1安装kafka服务 安装环境： CDH 5.13.1 kafka 3.1.1-1.3.1.1.p0.2 CentOS release 6.10 (Final) java version "1.8.0_131" 安装前准备： cloudera manager管理界面添加服务，会找到kafka服务，但是安装提示如下图： Apache Kafka将发布-订阅消息重新考虑为...
CDH集成Kafka
热门推荐
NeverGiveup54的专栏
01-19 1万+
参考CDH官网文档http://www.cloudera.com/content/www/en-us/documentation/kafka/latest/topics/kafka_installing.html 在CDH官网中关于Kafka的安装和升级中已经说到，在CDH中，Kafka作为一个分布式的parcel，单独出来作为parcel分发安装包。只要我们把分离开的kafka的服务描述jar
CDH-安装Kafka
weixin_39182877的博客
02-04 1357
https://www.cloudera.com/documentation/kafka/latest/topics/kafka_installing.html#concept_m2t_d45_4r cd /var/www/html [root@hadoop001 html]# ll total 8 drwxr-xr-x 2 root root 4096 Jan 14 04:48 cdh_
CDH5.13安装
gooesaa的博客
08-21 1164
准备安装包： mysql环境： mysql 的rpm包：https://dev.mysql.com/downloads/mysql/ Red Hat Enterprise Linux 7 / Oracle Linux 7 (x86, 64-bit) jdbc链接包：https://dev.mysql.com/downloads/connector/j/ mysql-connector-ja...
基于cdh的Kafka+Flume配置（详细，成功运行）
lukabruce的博客
07-23 7303
目 录 一 Kafka 1 1 版本选择 1 2 集群搭建规划 1 3 修改Kafka相关配置文件 1 4 配置全局变量 1 5 启动Kafka集群 2 6 测试数据 3 二 Flume 5 1 版本选择 5 2修改Flume相关配置文件 5 3 配置全局变量 6 4 启动Flume 6 5 测试数据 7 三 Flume + Kafka测试启动命令 10 1 Flu...
使用CDH5.15.1版本，搭建kafka 3.1.1-1.3.1.1。消费者拉取数据失败的原因
L_lipo的博客
06-05 870
使用CDH5.15.1版本，搭建kafka 3.1.1-1.3.1.1。消费者拉取数据失败的原因 只设置了一个broker。 解决：设置多个 生产者，消费者代码：kafka与springboot整合 maven： <dependency> <groupId>org.apache.kafka</groupId> <arti...
CDH5.10 添加kafka服务
阿正的博客
03-28 1142
https://www.cnblogs.com/lenmom/p/9157087.htmlCDH5.10 添加kafka服务 https://www.jianshu.com/p/bd17e2005284CDH集群添加kafka https://blog.csdn.net/weixin_39778085/article/details/79408035CDH 安装Kafka服务的一些小问题...
CDH5.12.X添加Kafka服务
aizhenshi的博客
07-05 1976
    最近有同学问我CDH怎么安装Kafka服务，正好我之前也有安装过，在这里将安装过程记录一下，方便各位同学过坑！    既然已经安装了CDH,那么我们在安装kafka服务的时候,很自然的直接添加服务：        但是有提示:Before adding this service, ensure that either the Kafka parcel is activated or the...
cdh5.15.1添加kafka服务
zfs_sir的博客
05-29 1554
安装好cdh后在cloudera-manager管理界面上并没有kafka服务，在CDH官网中关于Kafka的安装和升级中已经说到，在CDH中，Kafka作为一个分布式的parcel，单独出来作为parcel分发安装包。只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了，就可以实现完美集成了。 （一）查看版本对应 访问网址https://www.cloudera.com/documentation/enterprise/release-notes/topics/rn_con...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值