kafka 安装与配置

Kafka需要依赖JAVA环境运行，如何安装JDK这里不做介绍
下载
地址：https://kafka.apache.org/downloads
这里下载的是kafka_2.11-0.11.0.1.tgz

wget http://mirror.bit.edu.cn/apache/kafka/1.1.0/kafka_2.11-1.1.0.tgz

解压

tar -xzf kafka_2.11-0.11.0.1.tgz
cd kafka_2.11-0.11.0.1

启动zookeeper

半后台启动:
$ bin/zookeeper-server-start.sh config/zookeeper.properties &
纯后台启动:
$ bin/zookeeper-server-start.sh config/zookeeper.properties 1>/dev/null 2>&1 &

默认使用的2181端口，可在配置文件修改。

启动kafka server

半后台启动:
bin/kafka-server-start.sh config/server.properties &
纯后台启动:
bin/kafka-server-start.sh config/server.properties 1>/dev/null 2>&1 &

(非本地生产者和消费者访问Kafka，记得修改 config/server.properties中的listeners, 例如
listeners=PLAINTEXT://192.168.33.152:9092)

create a topic

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

查看topic

bin/kafka-topics.sh --list --zookeeper localhost:2181

好像没有输出

启动生产者

$ bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test

输入

This is a message
This is another message

启动消费者

$ bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning
This is a message
This is another message

如果无法启动，根据提示，可能需要加zookeeper：

$ bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --zookeeper localhost:2181 --topic test --from-beginning

参考
kafka官网 https://kafka.apache.org/ https://kafka.apache.org/quickstart
Just try, don’t shy.