Giraph消息发送结构刨析

每个ComputeCallellable线程对应一个NettyWorkerClientRequestProcessor, 
每个NettyWorkerClientRequestProcessor对应一个SendMessageCache,
每个SendMessageCache内部待发送的消息按照worker进行区分,到同一个worker的消息超过阈值就开始发送,


即1个ComputeCallellable<->1个NettyWorkerClientRequestProcessor<->1个SendMessageCache<->多个按照worker区分的消息


这样做的好处是每个分区的消息是并行发送,且互补干扰,坏处是消息无法合并优化。



但是在最后的实际发送对象是NettyWorkerClient,

这个每个BspServiceWorker都只有一个,所有的NettyWorkerClientRequestProcessor公用这一个发送器。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值