
kafka
文章平均质量分 82
scdxmoe
这个作者很懒,什么都没留下…
展开
-
Kafka文件存储机制那些事
http://tech.meituan.com/kafka-fs-design-theory.html Kafka是什么 Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apa转载 2016-12-27 16:26:58 · 374 阅读 · 0 评论 -
Kafka 高性能吞吐揭秘
https://segmentfault.com/a/1190000003985468 A high-throughput distributed messaging system.--Apache Kafka Kafka作为时下最流行的开源消息系统,被广泛地应用在数据缓冲、异步通信、汇集日志、系统解耦等方面。相比较于RocketMQ等其他常见消息系统,Kafka在保障了大部分转载 2016-12-27 16:40:46 · 651 阅读 · 0 评论 -
kafka 安装部署
一、 安装zookeeper: http://blog.youkuaiyun.com/scdxmoe/article/details/53906025 Zookeeper安装 1. 安装wget http://www.apache.org/dist//zookeeper/zookeeper-3.3.6/zookeeper-3.3.6.tar.gz 2 tar zxvf zo原创 2016-12-28 10:33:42 · 494 阅读 · 0 评论 -
nginx+lua+kafka实现日志统一收集汇总
http://hot66hot.iteye.com/blog/2291916 一:场景描述 对于线上大流量服务或者需要上报日志的nginx服务,每天会产生大量的日志,这些日志非常有价值。可用于计数上报、用户行为分析、接口质量、性能监控等需求。但传统nginx记录日志的方式数据会散落在各自nginx上,而且大流量日志本身对磁盘也是一种冲击。 我们需要把这部分nginx日志统一收集汇转载 2017-02-07 19:24:03 · 1057 阅读 · 0 评论