一、概述
日志工具ELK,负责容器应用的日志收集,提供统一查看、检索功能。
二、ELK安装(集群版)
1、准备安装包
logstash-7.2.0.tar.gz
kibana-7.2.0-linux-x86_64.tar.gz
kafka_2.12-2.3.0.tgz
elasticsearch-7.2.0-linux-x86_64.tar.gz
zookeeper-3.4.14.tar
上传到服务器,并解压
2、安装zk集群(多节点操作一致)
A、下载zookeeper-3.4.14.tar
上传到服务器,并解压
B、zk集群配置
创建data、logs目录,修改配置文件zoo.cfg
添加集群节点信息server.1 server.2 server.3
C、启动zk集群
/home/yunwei/software/zookeeper-3.4.14/bin
./zkServer.sh start
Netstat -an|grep 2181(和配置端口一致,默认2181) 验证服务是否启动成功
3、安装kafka(多节点操作一致)
A、解压kafka_2.12-2.3.0.tgz
B、修改配置server.properties(多节点,节点号按顺序填写0,1,2,3…)
Jvm配置
C、启动kafka
增加启停脚本 start.sh stop.sh
./bin/kafka-server-start.sh ./config/server.properties 1>kafka-start.out 2>&1 &
./bin/kafka-server-stop.sh ./config/server.properties 1>kafka-stop.out 2>&1 &
D、测试生产者&消费者
创建一个 名称为testapplog 的topic
bin/kafka-topics.sh --create --zookeeper localho