Mycat分片（分库分表）实践：一张逻辑表拆分为4台服务器的16张表

最新推荐文章于 2024-04-30 02:32:29 发布

原创

最新推荐文章于 2024-04-30 02:32:29 发布 · 849 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#mycat

本文介绍了如何使用Mycat进行分片，将一张包含10亿数据的业务表拆分到4台服务器的16张子表中。通过在每台服务器上创建4个数据库和对应表，并设定Mycat的分片规则，实现了按身份证号字段的hash值进行分片。测试验证了分库分表的有效性，强调了Mycat分片策略在减少插入事务控制难度方面的优势。同时，提醒注意Mycat对特定SQL的不支持及权限配置问题。

需求

一张业务表有10亿数据，需要按身份证号字段certno拆分为4台服务器中的16个子表，怎么操作？

设计

使用mycat的分片功能实现分库分表

4台服务器，每台服务器起一个mysql实例，每个实例创建4个database，每个database建一张同名(tu_trade_ng)的表

制定mycat的分片规则，按certno字段的hash值进行分片

mysql 实例	database	tablename
127.0.0.1:7006	nifa_db_t0	tu_trade_ng
	nifa_db_t1	tu_trade_ng
	nifa_db_t2	tu_trade_ng
	nifa_db_t3	tu_trade_ng
127.0.0.1:7007	nifa_db_t0	tu_trade_ng
	nifa_db_t1	tu_trade_ng
	nifa_db_t2	tu_trade_ng
	nifa_db_t3	tu_trade_ng
127.0.0.1:7008	nifa_db_t0	tu_trade_ng
	nifa_db_t1	tu_trade_ng
	nifa_db_t2	tu_trade_ng
	nifa_db_t3	tu_trade_ng
127.0.0.1:7009	nifa_db_t0	tu_trade_ng
	nifa_db_t1	tu_trade_ng
	nifa_db_t2	tu_trade_ng
	nifa_db_t3	tu_trade_ng

实现

mysql创建database

每个mysql实例中创建4个database，共计16个database：

CREATE DATABASE `nifa_db_t0` /*!40100 DEFAULT CHARACTER SET utf8 */;
CREATE DATABASE `nifa_db_t1` /*!40100 DEFAULT CHARACTER SET utf8 */;
CREATE DATABASE `nifa_db_t2` /*!40100 DEFAULT CHARACTER SET utf8 */;
CREATE DATABASE `nifa_db_t3` /*!40100 DEFAULT CHARACTER SET utf8 */;

mysql创建table

每个database中创建一个table，共计16个table：

# 复用了tu_trade_total_area_0的表结构
create table nifa_db_t0.tu_trade_ng like tu_trade_total_area_0;
create table nifa_db_t1.tu_trade_ng like tu_trade_total_area_0;
create table nifa_db_t2.tu_trade_ng like tu_trade_total_area_0;
create table nifa_db_t3.tu_trade_ng like tu_trade_total_area_0;

mycat制定

mycat需要配置的东西：
scheme.xml

<!-- 表名登记 以及分片规则、datanode关联 -->
<table name="tu_trade_ng" primaryKey="ID"  rule="certno-hashcode"  dataNode="dnng$1-16" />
<!-- 16个datanode -->
<dataNode name="dn1" dataHost="NIFADB_1" database="nifa_db_t0" />
<dataNode name="dn2" dataHost="NIFADB_1" database="nifa_db_t1" />
<dataNode name="dn3" dataHost="NIFADB_1" database="nifa_db_t2" />
<dataNode name="dn4" dataHost="NIFADB_1" database="nifa_db_t3" />
<dataNode name="dn5"