superviser3000的博客

logstash作用 logstash的作用是日志收集器，在我这个例子里，我的input是命令行的标准输入，而output为kafka和命令行标准输出。 logstash的配置信息为： input { stdin {} } output { kafka { topic_id => "drTest" bootstrap_servers => "192.16...

保证storm和kafka上的消息有序 整体流程：kafka生产者->kafka消费者->spout->bolt： kafka的生产者按制定字段发送到指定主题上，保证一类消息的先后次序（如果想要所有的消息都有序，可以只用一个分区，但是这样就只能有一个消费者消费） producer = kafkaClientService.< String, String > n...

kafka是一个可靠的消息中间件（生产者和消费者模式）。kafka可以用于构建实时的数据管道、有强大水平扩展能力、处理效率很高 参考： http://kafka.apache.org 基础概念http://kafka.apache.org/intro 安装 docker中使用kafka：https://www.jianshu.com/p/263164fdcac7 下载kafk...

概览 - kafka解决的问题 - 主题 - 分区 - 消息 - 生产者 - broker - broker集群 - 消费者 - 消费者组群 - 生产者分区和消费者群组 - 消息可靠性 - 消息系统 - 队列和广播 - 消息保序 - 存储系统 - 流处理 - 整合 - 应用场景 - api分类 kafka解决的问题 生产者种类多，数...