kafka常用命令

最新推荐文章于 2022-03-23 15:52:07 发布

原创最新推荐文章于 2022-03-23 15:52:07 发布 · 184 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#kafka

本文详细介绍Apache Kafka的安装步骤及配置方法，包括单机与集群环境的搭建、主题的创建与管理、生产者与消费者的使用等核心内容。

1、安装：

下载地址： http://kafka.apache.org/downloads

# tar -xzf kafka_2.11-1.1.0.tgz

2、启动

注：需要先安装 zookeeper....

    # cd kafka_2.11-1.1.0

    # bin/kafka-server-start.sh config/server.properties

#守护进程方式

# bin/kafka-server-start.sh -daemon config/server.properties &

3、创建主题：

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

查看已有主题：

    bin/kafka-topics.sh --list --zookeeper localhost:2181

    --create：动作参数 创建主题；  --zookeeper localhost:2181: 集群位置确定；    

    --replication-factor:备份数； --partitions:分区数；     --topic: 主题名称

查看集群描述主题

bin/kafka-topics.sh --describe --zookeeper localhost:2181 --topic test

--describe:动作参数 描述集群；  --zookeeper localhost:2181 集群位置确定
       --topic:主题名称

4、创建生产者：

bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test

5、创建消费者：

bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

6、创建集群:

config/server-1.properties:

    broker.id=1
    listeners=PLAINTEXT://:9093
    log.dir=/tmp/kafka-logs-1
 
config/server-2.properties:
    broker.id=2
    listeners=PLAINTEXT://:9094
    log.dir=/tmp/kafka-logs-2



> bin/kafka-server-start.sh config/server-1.properties &
...
> bin/kafka-server-start.sh config/server-2.properties &
...