Geek_ymv的专栏

http://www.cnblogs.com/yaomajor/p/5695084.html

这一章将介绍如何安装和运行Kafka，包括如何设置Zookeeper（Kafka使用Zookeeper保存Broker的元数据），还会介绍Kafka的基本配置，以及如何为Kafka选择合适的硬件，最后介绍如何在一个集群中安装多个Kafka broker，以及把Kafka应用到生产环境要注意的事项。...

初识Kafka 每个应用程序都会产生数据，包括日志消息、度量指标、用户活动记录、响应消息等。数据的点点滴滴都在暗示一些重要的事情，比如下一步行动的方向。我们把数据从源头移动到可以对它们进行分析处理的地方，然后把得到的结果应用到实际场景中，这样才能够确切的知道这些数据要告诉我们什么。比如我们每天在购物网站上浏览感兴趣的商品，浏览信息被转换成商品推荐，并实时展示给我们。 1.1 发布与订阅消息系统...

定义 Kafka 是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。 消息队列 传统消息队列的应用场景 异步处理 用户注册流程的同步处理的情况如下所示： 用户注册流程的异步处理的情况如下所示： ...

Kafka 安装部署 命令行操作 查看当前服务器中的所有topic 创建topic 删除topic 查看某个topic详情 修改分区数

Kafka 中消息是以 topic 进行分类的，生产者生产消息，消费者消费消息， 都是面向topic的。 topic 是逻辑上的概念，而partition 是物理上的概念，每个partition 对应于一个log 文件，该log 文件中存储的就是 producer 生产的数据。producer 生产的数据会被不断追加到该log 文件末端，且每条数据都有自己的offset。消费者组中的每个消费者都会...

RabbitMQ的高可用 RabbitMQ是比较有代表性的，因为是基于主从做高可用的，RabbitMQ有三种模式：单机模式，普通集群模式，镜像集群模式。 单机模式 一般用在本地，不会用在生产环境。 普通集群模式 在多台机器上启动多个RabbitMQ实例，每个机器启动一个，但是你创建的queue只会放在一个RabbitMQ实例上，每个实例都同步queue的元数据。消费者消费的时 镜像集群...