
kafka
利剑 -~
追求卓越成功就会出其不意找上门
展开
-
kafka 思维导图
最近在培训沟通力过程中,一句话说的特别好,有输入就要有输出,最近又学习了一遍kafka 给大家分享一下原创 2021-01-18 13:37:52 · 248 阅读 · 0 评论 -
Kafka文件存储机制
Kafka是什么 Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。 1.前言 一个商业化消息队列的性能好坏,其文件存储机制设计是衡量一个消息队列服...转载 2018-08-05 17:33:51 · 241 阅读 · 0 评论 -
kafkaspot在ack机制下如何保证内存不溢
storm框架中的kafkaspout类实现的是BaseRichSpout,它里面已经重写了fail和ack方法,所以我们的bolt必须实现ack机制,就可以保证消息的重新发送;如果不实现ack机制,那么kafkaspout就无法得到消息的处理响应,就会在超时以后再次发送消息,导致消息的重复发送。 但是回想一下我们自己写一个spout类实现BaseRichSpout并让他具备消息重发,那么...转载 2018-08-05 18:49:04 · 386 阅读 · 0 评论