GiraphV1.1与V1.2之磁盘读写比较

本文对比了V1.1和V1.2版本中图计算的写入与读取策略变化。V1.1采用固定分区策略,而V1.2则在内存压力下灵活调整。读取方面,从顺序读取改进为缓冲区读入方式。
写入策略:
   V1.1采用的是固定分区策略,即分区数大于最大就开始写磁盘。message则是大于一定数量就写。
   V1.2中采用的是无论是分区还是消息,只要存在内存压力(当然有三种不同策略),就写磁盘。


读取策略:
   V1.1消息应该是一次读取一个顶点的input消息,算完后读取下一个,还必须是顺序读取,即文件中顶点按顺序存储,顶点数据读取是普通的流式读取.
   V1.2采用的是缓冲区读入的方式(无论顶点还是分区数据)   
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值