大型网站架构之分布式缓存

缓存是优化网站性能的第一手段。在大型网站中,缓存通常用来保存热点数据,或者保存应用上下文相关信息。比如之前提到的session服务器集群就可以用分布式缓存来搭建。当然,分布式缓存还可用于缓存数据库中的热点数据以减轻数据库的压力。

分布式缓存的架构方式通常有两种:一种是以JBoss为代表的需要同步的分布式缓存,一种是一MemCached为代表的不互相通信的分布式缓存。

JBoss在所有服务器中保存相同的缓存数据,当一台服务器的数据有更新时,会同步到其他的服务器。这种所有服务器都保存相同数据的方式导致JBoss的缓存容量有限,而且同步的代价会随着服务器数量的增加而增大。因此这种方案很少在大型网站中使用。JBoss通常将应用服务器和缓存部署在同一台服务器上,如下图:
[img]http://dl2.iteye.com/upload/attachment/0117/6774/fc2c74b4-03eb-366d-a7d4-c735b18c156d.png[/img]

MemCached采用一种互不通信的分布式架构,每个服务器中缓存的数据不相同。应用服务器通过一致性hash等路由算法确定数据所在位置后进行访问,缓存服务器之间互不通信,具有很好的扩展性。如下图:
[img]http://dl2.iteye.com/upload/attachment/0117/6772/66b224ec-40b9-3dad-b9a7-6ec8dee39754.png[/img]

下面重点说下在MemCached中使用的路由算法,由于MemCached集群中不同服务器缓存的数据不同,因此应用服务器访问数据之前需要先通过路由算法确定数据所在的缓存服务器。最容易想到的路由算法是余数hash,但是在缓存系统需要扩容时,余数hash是不可用的。

比如例子:原来有3台节点,对应的hash值为0,1,2,现在增加一台节点后变为4台节点,对应的hash值为0,1,2,3。那么0-11这12个原来已经缓存的数据,在加入新节点后的可用率为25%。就是说,[color=red]向缓存系统中新加入一个节点之后,原来缓存的大部分数据变得无不可用了。这个现象在大型网站架构中是可怕的,因为新加入节点后造成的缓存低可用将导致数据库压力增大甚至有可能造成网站事故。[/color]
因此,我们把[color=red]向缓存系统中添加节点之后,能够保证已经缓存的数据仍然有效作为分布式缓存中路由算法的主要设计目标。[/color]为此,有一致性hash算法。

[color=red]一致性hash算法:[/color]
先构造一个长度为2^32的整数环,根据节点名称的hash值(其分布范围为0~2^32-1)将缓存服务器的节点放置在这个hash环上。计算需要缓存的数据的hash值(其分布范围为0~2^32-1),然后在hash环上顺时针找距离这个hash值最近的缓存服务器节点,就是数据要缓存的目标节点。如图:
[img]http://dl2.iteye.com/upload/attachment/0117/6778/e59b36ca-aaeb-3315-b4fe-7ffb5ad9457d.png[/img]

[color=red]一致性hash算法,有一个小小的问题[/color]。当向缓存中添加一个新的节点之后,根据一致性hash算法的规则,新添加的节点仅仅能够减轻一台原有服务器的压力,如下图:新添加的节点Node3只能缓解Node1的压力,而无法缓解Node0和Node2的压力。
[img]http://dl2.iteye.com/upload/attachment/0117/6780/8658344b-155a-3864-a8ce-80eeb331f7ec.png[/img]

上面提到的[color=red]添加新节点后负载不均衡的问题可以通过虚拟的手段来解决[/color]:将每台物理服务器虚拟为一组虚拟服务器,之后将这组虚拟服务器放到hash环上。采用一致性hash算法找到虚拟服务器,该虚拟服务器对应的物理服务器就是目标节点。如图:
[img]http://dl2.iteye.com/upload/attachment/0117/6782/9f4c811a-c2f4-3ffb-97ad-2c2deecdd5f6.png[/img]
在实践中,一台物理服务器一般虚拟为一组150个虚拟服务器,具体情况再改动。
资源下载链接为: https://pan.quark.cn/s/ab6ed9424307 【五轴后处理 CAM_C++】项目聚焦于高级数控加工技术,核心目标是把.CLS格式文件转化为5轴CNC机床可执行的G代码。G代码作为CNC机床的专属语言,能精准操控机床的切割速度、进给速率以及刀具路径等操作。该过程被称作后处理,是将CAM系统生成的刀具路径数据转变为机器能识别代码的最终环节。 项目涵盖三个工程,分别对应不同的5轴配置。其一,POST_5axis_double_table_AC是双转台配置,A轴转台绕垂直轴旋转,C轴转台绕水平轴旋转,工件置于A轴转台上。此配置利于加工复杂工件表面,在航空、航天及模具制造领域应用广泛。其二,POST_hand_machine工程对应臂式5轴机器,其机械臂结构赋予了更大的工作范围与灵活性,尤其适合加工大型或形状不规则工件,可实现多角度、全方位切割。其三,POST_5axis_head_bc工程为BC轴配置,B轴是主轴旋转,C轴是附加旋转轴,工件可在两个水平轴上旋转,能处理精细三维轮廓工件,拓展了加工能力。 在这些工程里,包含了众多5轴加工算法,这些算法对理解与优化5轴CNC运动控制极为关键。它们涵盖刀具路径规划、误差补偿、动态控制等诸多方面,需考量刀具与工件相对位置、切削力、工件变形等要素,其优化程度直接关联加工精度、效率及刀具寿命。此资源对于学习和研究5轴CNC后处理技术极具参考价值,工程师通过深入研究源代码和算法,能更好地理解并定制自己的5轴CNC后处理器,以满足特定加工需求,提高生产效率和产品质量。对于有志于踏入高级数控加工领域的人而言,无论是学习者还是从业者,该资源都是一个珍贵的资料库,能提供实践操作和理论学习的良机。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值