- 博客(4)
- 收藏
- 关注
原创 kafka 分区分配策略
前言在上一篇文章[生产者自定义分区策略](https://blog.youkuaiyun.com/qq_27405969/article/details/103943318) 我们提到,我们可以自定义消息的存储分区
2020-01-12 16:08:27
369
原创 kafka 生产者消息分发策略
分发策略消息是kafka中最基本的额数据单元,在kafka中,一条消息由key、value两部分构成,在发送一条消息时,我们可以指定这个key,producer会根据key来判断当前这条消息应该路由存储到哪个partition。默认分发策略默认情况下,kafka采用的是对key进行hash取模计算出分区。如果key为null,则会随机分配一个分区。随机是有一定的时间范围限制,在"me...
2020-01-12 10:38:55
687
原创 centos 安装zookeeper (单机环境)
centos 安装zookeeper操作系统zookeeper 版本安装步骤操作系统centos 7zookeeper 版本3.4.14安装步骤下载 zookeeper-3.4.14.tar.gz,官网下载地址创建目录 mkdir -p /usr/local/dev/zookeeper 权限不够的用户 sudo mkdir -p /usr/local/dev/zookee...
2020-01-11 12:18:14
219
原创 Centos 7 kafka环境搭建
centos kafka环境搭建所需资源准备步骤单机环境安装步骤集群环境安装步骤所需资源kafka_2.11-2.1.1.tgz, jdk环境, zookeeper准备步骤由于kafka运行依赖zookeeper, 因此我们先安装zookeeper(kafka安装包自带了 zookeeper,独立安装是为了更好模拟真实线上环境)安装传送门,centos 下zookeeper 安装由...
2020-01-11 10:53:41
386
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅