
流计算
文章平均质量分 80
xqy1522
这个作者很懒,什么都没留下…
展开
-
storm自定义grouping
storm有很多种grouping方案storm wiki上面对各种grouping的说明如下:Stream groupingsPart of defining a topology is specifying for each bolt which streams it should receive as input. A stream grouping defines ho原创 2012-08-29 16:44:49 · 7953 阅读 · 1 评论 -
twitter storm 配置项
转自:http://blog.youkuaiyun.com/larrylgq/article/details/7230871配置项配置说明storm.zookeeper.serversZooKeeper服务器列表storm.zookeeper.portZooKeeper连接端口storm.local.dirstorm使用的本地文件系统目录转载 2012-07-16 11:09:51 · 1634 阅读 · 0 评论 -
Heron(一)—-storm的一些短板
twitter在使用storm过程中发现了一些storm的弊端,开发Herons相对storm需要提升的几个特性:1)更好的扩展性, 2)更容易调试 3)更高的性能 4)更好管理–可以和其他系统复用资源原创 2015-06-18 18:24:01 · 3383 阅读 · 0 评论 -
Heron(二)—-系统架构
Heron的总体架构如图1所示,用户开发的代码通过aurora scheduler的命令行进行提交,aurora schedule是一个跑在mesos上的框架。 图1topology会以一个aurora任务的方式运行,topology包含持有一些container。如图2所示。第一个container运行的进程叫topology Master。其余的contai原创 2015-06-19 13:30:08 · 1178 阅读 · 0 评论