可扩展分布式数据库集群的搭建,OneProxy分库分区设计

本文介绍了如何使用OneProxy进行分库分区设计,包括按范围、值列表和散列算法的分区方法,以及通过LVS和Keepalived实现的双机热备设计,提升数据库集群的性能和可用性。

OneProxy分库分区设计

对于超大容量的表存储来说,MySQL支持分区表设计,可以按某一字段进行按范围 (Range)、按值列表(List) 或按散列算法(Hash) 等方法进行分区。

OneProxy将分区表的概念从数据库层抽象到了SQL的转发器层,通过对通信协议进行分析,可以根据SQL查询语句的表名及传入参数对.上层应用进行透明的智能路由,从而实现虚拟分区效果,这种分区对应用来说是完全透明的。

在OneProxy中同样支持按范围、按值列表或按散列算法进行虚拟分库分表设计,从内容上看,与MySQL创建分区表的关键信息非常类似。

下面分别对这三种分区方法的分库分表配置进行说明。

可扩展分布式数据库集群的搭建,OneProxy分库分区设计

 

按范围分库分表

当按范围分库分表时,必须有一个针对应用的虚拟表名(Table) ,并指定一个用于 分区的字段(PKey)、字段的类型(Type) ,以及分区的方法(Method)。同时针对每-一个分区,都可以使用增加后缀( Suffix)的方式设置独立的表名,并且指定分区所在的集群分组(Group) ,以及分区字段取值的上限(Value) 等。

例如,一个订单表按范围进行分区的设计如下所示:

{
{
"table": "t order",
"pkey"
: "id",
"type" : "int",
"method" : "range",
"partitions":
{
{"suffix" : " 0","group": "group1", "value": "100000" },
{"suffix" : " 1","group": "group1", "value" : "200000" }
{"suffix":" 2","group": "group2", "value": "300000" },
{"suffix": " 3","group": "group2", "value": null}
}
}
}

这样,当访问虚拟表名t _order 时,就将按其ID“value”的范围导向真实表名,如“t _order. 0”、“t_ _order_ 1”等分表中进行数据的存取操作。

按值列表分库分表

当按值列表分库分表时,其实就是在虚拟表名中指定-一个用于分区的字段、 字段的类型、以及分区的方法。同时,针对每一个分区,都可使用增加后缀( Suffix)的方式设置独立的表名,并且指定分区所在的集群分组,以及分区字段能取得的值列表等配置。当-个分区没有指定任何分区值列表时,表示所有其他的值都落入这个分区中。

例如,一个订单表按值列表进行分区的设计如下所示:

{
{
"table" : "t_order",
"pkey" : "id",
"type": "int",
"'method":"list",
"partitions":
{
{ "suffix" : "_0","group": "group1", "value" : ["1", "2", "3"] },
{ "suffix": "_1", "group": "group1", "value" : ["4","5","6"] },
{ "suffix" : "_2", "group": "group2", "value" : ["7", "8","9"] },
{ "suffix" : "_3", "group": "group2", "value" : ["10", "11", "12"] },
{ "suffix": " 4", "group": "group2", "value" :[] }
}
}
}

其中,真实表名由虚拟表名及其后缀组成,例如“t_order_0”,并且数据的存取将在分到的指定集群分组中进行。

按散列算法分库分表

当按散列算法分库分表时,必须有-一个针对应用的虚拟表名(Table) ,并指定-一个用于分区的字段、字段的类型,以及分区的方法。同时,针对每-一个分区, 都可以使用增加后缀的方式设置独立的表名

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值