weixin_41141000的博客

kafka使用教程指令集注意 指令集 ---kakfa指令 cd /usr/local/server/kafka_2.11-0.10.1.0/bin 查看topic列表 ./kafka-topics.sh --list --zookeeper 172.0.0.1:2181 新建topic ./kafka-topics.sh --create --zookeeper 172.0.0.1:2181 --replication-factor 1 --partitions 1 --

ELK搭建-介绍背景技术框架输入处理输出输入***处理***kafka消费输出*** 介绍 背景 基于日志采集为需求背景，实现大批量日志数据采集。采集数据存储在es湖中。 技术框架 此技术框架分为三大部分 输入、处理、和输出 输入主要采集服务器日志文件推送至kafka。 处理主要从kafka拉取消息进行消费，并存储到es中。 输出主要提供日志的查询接口，供查询使用。 输入 为采集的源头，使用filebeat进行本地文件采集。 抛来一个疑问，为什么选择filebeat，而不是logstach，请一起思考？？

消息队列的对比(KafKa、RabbitMQ 、ActiveMQ KafKa、RabbitMQ 、ActiveMQ 三者的对比 KafKa、RabbitMQ 、ActiveMQ 三者的对比 1 TPS比较 Kafka最高，RabbitMq 次之， ActiveMq 最差。 2 吞吐量对比 kafka具有高的吞吐量 3 架构模型方面 RabbitMQ遵循AMQP协议 kafka遵从一般的M...