
消息系统
文章平均质量分 78
年轻的海员
专注大数据分布式计算,存储,消息系统等
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Kafka 0.9.0 文档翻译-1、Getting Started
kafka目前应用比较广泛,中小规模的公司都把kafka当做大数据平台的数据总线,成为很多流计算系统的输入源,比如storm,flink,spark-streaming等。同时各种应用的日志做离线处理的时候,架构上倾向于使用kafka作为消息管道,日志push到kafka,然后使用分布式task将数据写入hdfs等,诸如此类的应用还有很多,这些正说明kafka有不错的高吞吐低延时性能。一些大的公司原创 2016-02-21 17:14:21 · 1248 阅读 · 1 评论 -
actor 模型原理 (一)
actor模型很牛逼,很流行,但是我不会,妈的,国内搜出来的讲解actor的都看不太懂,讲不太清,下面哥们就翻译一下老外的文章,以粗浅的方式体会一下到底什么是actor模型?多线程开发要处理并发,锁,线程同步等一系列问题,一不小心,弄个大的bug,所以一般都不愿意自己动手写,能不能换一种思路,可以不可以介绍一种更高级的抽象模型,让我想实现多线程应用的时候,不用再考虑这些底层问题呢?原创 2016-12-22 15:31:08 · 12095 阅读 · 6 评论 -
actor 模型原理 (三)
上面这个图呢,展示了老师这个actor收到消息之后,给学生回复的过程DriverApp 发送一个初始化 InitSignal 消息给 StudentActor StudentActor 收到这个消息之后给老师发了一个 QuoteRequest老师 回复了一个 QuoteResponse.学生收到之后再把这个回复打印出来对于驱动程序,那么上面它做的事情用代码就原创 2016-12-22 17:30:38 · 1506 阅读 · 0 评论 -
mongoDB复制集维护和切换——内存限制
使用mongoDB是因为用到了graylog,部署运行2-3个月之后,发现mongoDB占用物理内存巨大,50G+,公司的数据架构居然质问我为什么不设置-Xmx堆内存大小,我尼玛只能呵呵醉了!简单说mongoDB似乎没有配置项可以限制使用物理内存,粗略理解mongoDB本身不管理内存块,而是全部交给操作系统,如何限制mongoDB内存呢?网上有说使用ulimit等,但是事实证明无效。应原创 2017-09-19 11:44:06 · 1498 阅读 · 1 评论