Mycat扩容问题求解

最新推荐文章于 2021-04-08 10:30:59 发布
原创 最新推荐文章于 2021-04-08 10:30:59 发布 · 734 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mycat #数据库 #中间件

MYCAT扩容总是失败！

我的数据量比较大，大概4GB，原来的分片规则是3个dataHost，每个dataHost上面有3663个dataNode，表的分片规则是 sharding-by-prefixpatten.
现在我觉得dataNode有点太多了，我想修改为 3个dataHost，每个dataHost上面有43个dataNode，分片规则还是原来的sharding-by-prefixpatten.
我按照我的要求新建了newSchema.xml以及newRule.xml，并且执行了dataMigrate.sh脚本。执行过程报以下错误：
|[database:table] -> fail! reason: [databaes:table] datanode
只是提示了出错的datanode，并没有提示具体原因。
求教！！！

Mycat生产实践---数据迁移与扩容实践
wangshuang1631的博客
04-04 1万+
1 离线扩容缩容工具目前从mycat1.6开始支持。 一、准备工作 1、mycat所在环境安装mysql客户端程序 2、mycat的lib目录下添加mysql的jdbc驱动包 3、对扩容缩容的表所有节点数据进行备份，以便迁移失败后的数据恢复 二、扩容缩容步骤 1、复制schema.xml、rule.xml并重命名为newSchema.xml、newRule.xml放于conf目录下
MyCat生产实践--一致性hash分片&扩容
Moxiao__墨箫
04-26 9962
MyCat生产实践–一致性hash分片&扩容1、 mycat一致性hash算法分片测试结果配置el_user_user_info表使用一致性hash算法进行分片。 schema.xml<?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://io.my
MYCAT数据扩容+数据迁移
08-03
MYCAT数据扩容+数据迁移。。。。。。。。。。。。。。。
mycat扩容
qq_33337927的博客
02-19 520
原有分片节点为2，此处扩容成3。 2.1.1 mycat 所在环境安装 mysql 客户端程序 2.1.2 mycat 的 lib 目录下添加 mysql 的 jdbc 驱动包 下载mysql-connect-jdbc-5.1.35.jar,下载地址： https://mvnrepository.com/artifact/mysql/mysql-connector-java/5.1.35 　　把下...
Mycat (四) —— 数据扩缩容
zhouhuahao的博客
04-08 537
一.场景 数据已经超过了单个节点的存储上线，或者需要下线节点的时候，就需要对数据重新分片. 二.实现 1.在线扩容流程： a、把历史数据，通过中间件迁移到新库 b、新的写请求，发送到消息队列，不消费 c、数据迁移完毕，迁移程序下线 d、消费消息，将增量数据写入新库 e、数据一致性验证 f、旧数据库下线，切换到新库，重启应用 2.数据扩容（有分片表） ...
mycat扩容问题
qq_33337927的博客
02-21 488
上一篇写了mycat扩容的操作，但是还有一个添加节点扩容后数据没有迁移的问题遗留，确实会出现很多问题，一般都是和mysql交互的问题，本人问题已解决，所以记录一下注意事项： 出现的错误有mysql权限1045问题 mysql1064错误 mysql无法连接错误等，也可以去查看mycat的源码，不过源码一般问题不大，总结了以下几点： 1.mysql密码尽量设置成没有特殊符号的，也可以先修改，扩容完成...
mycat实战之扩容
zhaoquanwei2018的博客
09-10 1034
扩容是项目投入生产之后，经过一定的数据量的积累，达到一定的量级之后，需要执行的操作。 一、 离线扩容（摘自官方） 工具目前从 mycat1.6 开始支持。 一、准备工作 1、mycat 所在环境安装 mysql 客户端程序。 2、mycat 的 lib 目录下添加 mysql 的 jdbc 驱动包。 3、对扩容缩容的表所有节点数据进行备份，以便迁移失败后的数据恢复。 二、扩容缩容步骤 1、复制 schema.xml、rule.xml 并重命名为 newSchema.xml、newRule.xml 放于
Mycat生产实践之数据迁移与扩容实践.docx
09-01
《Mycat生产实践之数据迁移与扩容》 Mycat是一个开源的分布式数据库中间件，它能够将大型数据库拆分为多个子库，实现水平扩展，以处理大规模数据的存储和查询。在实际生产环境中，数据迁移和扩容是常见的需求，而...
MYCAT数据扩容与迁移实战指南
- 在进行扩容或缩容前，务必备份所有涉及的表数据，以防迁移过程中出现问题，影响数据完整性。 2. **扩容缩容步骤**： - 创建新的配置文件副本：复制现有的`schema.xml`和`rule.xml`，分别重命名为`newSchema.xml...
MyCat分库分表--实战10--多节点扩容与多节点删除
cuiruidu3106的博客
11-23 849
项目环境： 192.168.8.30 mycat 192.168.8.31 node1 192.168.8.32 node2 192.168.8.33 node3 ...
mycat扩容报错(后端节点为阿里RDS)：ERROR 1227：Access denied; you need (at least one of) the SUPER privilege(s)
云间小憩
10-15 1516
第六章 数据迁移与扩容实践 6.1 离线扩容缩容 工具目前从 mycat1.6 开始支持。 一、准备工作 1、mycat 所在环境安装 mysql 客户端程序 2、mycat 的 lib 目录下添加 mysql 的 jdbc 驱动包 3、对扩容缩容的表所有节点数据进行备份，以便迁移失败后的数据恢复 二、扩容缩容步骤 1、复制 schema.xml、rule.xml 并重命名为 newSchema....
MYCAT扩容
weixin_34273046的博客
10-31 273
一、原架构图： 二、扩容 　　在HOST1上新增节点db_user2 　　在HOST2上新增节点db_user2 三、操作步骤 1、mycat 所在环境安装 mysql 客户端程序 2、mycat 的 lib 目录下添加 mysql 的 jdbc 驱动包 　　下载mysql-connect-jdbc-5.1.35.jar,下载地址：https://mvnrepository.co...
快速学习-Mycat 如何对旧分片数据迁移或扩容，支持自动扩容么？
逍遥云恋
02-19 1182
Mycat 如何对旧分片数据迁移或扩容，支持自动扩容么？ 答：目前除了一致性 hash 规则分片外其他数据迁移比较困难，目前暂时可以手工迁移，未提供自动迁移方案，具体迁移方案情况 Mycat 权威指南对应章节。 ...
三、mycat实战之扩容（实操）
huangpeigui的专栏
12-06 3630
扩容是项目投入生产之后，经过一定的数据量的积累，达到一定的量级之后，需要执行的操作。 扩容配置下载地址 一、 离线扩容（摘自官方） 工具目前从 mycat1.6 开始支持。 一、准备工作 1、mycat 所在环境安装 mysql 客户端程序。 2、mycat 的 lib 目录下添加 mysql 的 jdbc 驱动包。 3、对扩容缩容的表所有节点数据进行备份，以便迁移失败后的数据恢复。二、扩容...
MyCAT集群在线扩容的场景小结
杨建荣的学习笔记
02-05 328
这是学习笔记的第2318篇文章 最近线上有一套集群的存储存在瓶颈，导致经常会有报警，如果按照存储现状和稍后的假期的数据增长，很可能会带来一些意料之外的问题，所以整体评估后，决定...
MyCat(三) 范围求模分片与扩容
cjd的博客
12-30 1123
范围求模分片先进行范围分片计算出分片组，组内再求模。 优点可以避免扩容时的数据迁移，又可以一定程度上避免范围分片的热点问题 综合了范围分片和求模分片的优点，分片组内使用求模可以保证组内数据比较均匀，分片组之间是范围分片可以兼顾范围查询。 最好事先规划好分片的数量，数据扩容时按分片组扩容，则原有分片组的数据不需要迁移。由于分片组内数据比较均匀，所以分片组内可以避免热点数据问题。 首先，需要你准备俩个...
一种高效、可自动扩容、缓存、永久存储通用方案设计
wangjin2891的专栏
08-11 2410
离线消息存储方案 1　系统框架设计 1.1　名词解释： 名词 解释 备注 OffServer集群 离线消息服务器集群 Redis 一个redis实例 用于存储一些关键信息 MysqlKeyHashServer（MKHS） 代理整个MySql
Mycat常见问题与解决方案---宜将剩勇追穷寇，不可沽名学霸王
热门推荐
wangshuang1631的博客
03-17 2万+
1 Mycat目前有哪些功能与特性？答: • 支持 SQL 92标准 • 支持Mysql集群，可以作为Proxy使用 • 支持JDBC连接多数据库 • 支持NoSQL数据库 • 支持galera for mysql集群，percona-cluster或者mariadb cluster，提供高可用性数据分片集群 • 自动故障切换，高可用性 • 支持读写分离，支持Mysql双主多从，以及一
Mycat 1.6日志分类-离线数据库迁移日志
junwen的博客
11-19 384
old config for migrate read fail!please check schema.xml or rule.xml ${异常} 错误:加载数据库迁移配置失败 解决:检测离线数据迁移的文件是否存在以及格式是否正确 tablesFile.properties read fail! 错误:tablesFile.properties 加载失败 解决:检查migrat...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值