mysql 一条命令直接加载主库数据到备库

最新推荐文章于 2024-12-24 09:48:27 发布
最新推荐文章于 2024-12-24 09:48:27 发布
阅读量927 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： mysql 文章标签： mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/selectdb/article/details/13017731
本文介绍了一种直接加载InnoDB表数据从主库到备库的方法，并提供了具体的命令示例。通过使用--single-transaction选项确保了事务一致性，对于非事务表则推荐使用--lock-all-tables。

如果只包含innoDB表，则可使用如下语句直接加载主库数据到备库

$mysqldump --single-transaction --all-databases --user=root --password=pass1 --port=3306 --host=server1|mysql --host=server2 --user=root --password=pass2 --port=3306

选项 --single-transaction用来保证数据为事务开始前的数据，如果是非事务性表，则可使用--lock-all-tables来保证数据的一致性

后使用change master to 执行二进制文件和位置即可。


MySQL高频基本面试问题整理
张彦峰的博客
04-07 174万+
总结大厂MySQL高频基本面试问题整理，用于快速查缺补漏
从mysql库向内存库全量同步_20201118-主从库实现数据一致
weixin_42319396的博客
01-30 588
MySQL主备数据一致性整体流程第一阶段在备库上通过 change master 命令，设置主库的 IP、端口、用户名、密码，以及要从哪个位置开始请求 binlog，这个位置包含文件名和日志偏移量。第二阶段在备库上执行 start slave 命令，这时候备库会启动两个线程，io_thread 和 sql_thread。其中 io_thread 负责与主库建立连接。主库校验完用户名、密码后，开始按...
MySQL数据库备份
L2111533547的博客
06-22 1万+
日志文件在数据库进行备份和恢复时起到了很重要的作用 常用的日志文件默认保存在 /usr/local/mysql/data 目录下 可在 /etc/my.cnf 配置文件中的 [mysqld] 中进行日志的路径修改、开启、关闭等操作用于记录 mysql 启动、停止或运行时产生的错误信息 可通过一下字段进行更新 1.3 二进制文件 二进制日志，用来记录所有更新的数据或者已经潜在更新了数据的语句，记录了数据的更改，可用于数据恢复 开启方式： 1.4 中继日志 一般情况下，它在 mysql 主从同步（复制）、读写分
mysql如何搭建备库_mysql主从库搭建
weixin_39917791的博客
01-20 516
1、主备库的搭建：略主库：10.1.1.17备库：10.1.1.182、主库授权：允许复制备份的权限GRANTREPLICATIONSLAVEON*.*TO'slaveuser'@'10.1.1.18'IDENTIFIEDBY'hsdhsT56';FLUSHPRIVILEGES3、主库数据导出mysqldump-uroot-p-h127.0.0.1--databa...
MySQL备份
是程序喵呀
12-24 1933
使用tar命令将数据库目录/var/lib/mysql/*进行备份。
Mysql搭建备库
说文科技，做有态度的研究。
10-08 2540
Mysql搭建备库 1.mysql安装 这个步骤不再赘述，如有不明白，请查看我的博客：https://blog.youkuaiyun.com/liu16659/article/details/81053412 2.环境 ip:192.168.211.4，主机名：server4，mysql-5.7.22 做master ip:192.168.211.5，主机名：server5，mysql-5.7.22 做sl...
mysql备库是什么_mysql数据库每日一备
weixin_30579759的博客
02-18 739
1，数据库目录/var/lib/mysql测试库/var/lib/mysql/ambari2，创建备份目录cd /homemkdir mysqlbackupcd mysqlbackup3，查看系统支持的存储引擎show engines;查看表使用的存储引擎两种方法：a、show table status from db_name where name='table_name';b、show cr...
MySQL之复制(三)
Cover_sky的博客
06-18 958
前面的设置都是嘉定主备库均为刚刚安装好且都是默认的数据，也就是说两台服务器上数据相同，并且知道当前主库的二进制日志。这不是典型的案例，大多数情况下有一个已经运行了一段时间的主库，然后用一台新安装的备库与之同步，此时这台备库还没有数据。有几种办法来初始化备库或者从其他服务器克隆到备库。选项–single-transaction使得转储的数据为事务开始前的数据。如果使用的是非事务型表，可以使用–lock-all-tables选项来获得所有表的一致性转储。
Mysql的主从复制和读写分离
qqyqqyqqyqqy1的博客
06-30 1442
1.Mysql支持的复制类型主（master）数据库启动bin二进制日志，这样会有一个Dump线程，这个线程是把主（master）数据库的写入操作都会记录到这个 bin的二进制文件中。然后从（slave）数据库会启动一个I/O线程（监控主服务器的二进制日志的变化），这个线程主要是把主（master）数据库的bin二进制文件读取到本地，并写入到中继日志（Relay log）文件中。最后从（slave）数据库其他SQL线程，把中继日志（Relay log。
京东二面：MySQL 主从延迟，读写分离 7 种解决方案
m0_74931226的博客
11-22 310
之间的数据同步问题，从库查询哪条记录，我们只要保证之前对应的写binglog已经同步完数据即可，可以不用管主从库的所有的事务binlog 是否同步。这个问题跟 MQ消息队列 既要求高吞吐量又要保证顺序是一样的，从全局来看确实无解，但是缩小范围就容易多了，我们可以保证一个分区内的消息有序。要求不是很高，比如：大V有千万粉丝，发布一条微博，粉丝晚几秒钟收到这条信息，并不会有特别大的影响。无论采用上面哪一种方案，如果主库的写操作频繁不断，那么从库的值永远跟不上主库的值，那么读流量永远是打在了主库上。
数据库（备）
weixin_30687587的博客
10-26 103
1 转载于:https://www.cnblogs.com/zhaochangbo/p/7739278.html
Mysql不停止主库做Slave ，mysqldump
my_bai的博客
06-01 3124
mysql服务器的主从配置，这样不但可以实现读写分离，也可以在主库死机后从备用库中恢复，如果有多个从库，还能实现集群，但是一直以来网上的很多教程都需要重启主库，在生产环境中这是不允许的，下面给大家一种不停止主库做从库的方法。 原有主库配置参数如下： # vi my.cnf  server-id = 1            #id要唯一  log-bin = mysql-b
mysql备库是什么_mysql如何避免备库出
weixin_35982673的博客
02-06 967
展开全部mysql的replication中有2个比较重要的class：Master_info(rpl_mi.h), Relay_log_info(rpl_rli.h)，他们分别对应于master,info文件和slave.info文件；很显然，Master_info是62616964757a686964616fe58685e5aeb931333365656638io_thread需要的，Rela...
数据库（MySQL的备份和恢复）
qq_64227183的博客
01-24 1490
数据库（MySQL的备份和恢复）
Mysql5.7.% 备库架构搭设及主从同步
随风漂移的驴
06-23 530
写一个小项目需要用到数据库备份以及负载均衡，在这里记录下所走的路以及坑。首先说下背景，在MySQL4.0之前的主从设置（也叫复制）只有两个线程。之后就变成了三个线程。    1：主库上把数据更改记录到二进制日志里。    2：从库读取二进制日志并写到从库的中继日志里。    3：从库读取中继日志并且将内容写入从库。之后开始架设MySQL集群。我使用Docker作为MySQL的搭载环境，来实现简单的...
mysql主备库数据同步搭建
小景天天的博客
02-29 4257
mysql版本5.5 服务器IP1      192.168.1.1   master 主库 服务器IP2      192.168.1.2   slave备库 1.修改主库 master   /etc/my.cnf     对于部分mysql可能没有这个文件,我从官方下的就没有，找到安装目录下，任意*.cnf拷贝到/etc目录下即可 # vi /etc/my.cnf
MySQL数据库备份策略与实践详解
hy199707的博客
03-26 3951
无论你是IT专业人士还是初次接触数据库管理的初学者，理解并掌握数据库备份技术都是非常关键的。备份不仅能够防止因硬件故障、软件错误、人为误操作等因素造成的损失，也是灾难恢复计划中的基石。
【香菇带你学Mysql】Mysql数据库主备搭建【建议收藏】
正在自我救赎的菜鸟。本人所有内容均不收费，可随意转发，复制
08-05 2859
为保证企业的稳定生产运营，一个高可用的数据库架构是不可或缺的。对于企业来说，如果数据库出现宕机、数据丢失或不可用等问题，将会产生重大的影响和经济损失。对于大型公司，其数据库必须 7*24 可用，不能容忍任何长时间的服务中断。通过主备架构，当主数据库因突发硬件故障无法工作时，备用数据库能立即接管服务，保证客户的交易和查询不受影响，维护了公司的信誉和业务正常运行。通过本文的介绍，我们了解了搭建MySQL数据库主备架构的重要性以及常见的架构类型，包括一主一从、一主多从和双主架构等。
sharding-jdbc什么情况select会走主库
热门推荐
程冯冯的博客
08-10 2万+
第一次使用sharding-jdbc然后就碰到了select for update不走主库，然后查了下官方文档并且自己验证了一下，以下几种情况会走主库。 select前增加HintManager.getInstance().setMasterRouteOnly();类似于pagehelper只对下一条查询语句生效。 存在事务的情况下，事务内的更新语句之后的select会走master，记住只有之后的，之前的select还是会走从库。 目前测试就这两种情况，如果没有事务的话，select默认肯定是走从库了
加快所述数据库备库的写入速度； 在所述数据库主库和所述数据库备库的延迟时间小于等于预设延迟阈值，将所述数据库主库设置为只读； 基于所述数据库主库的位点信息和所述数据库备库的位点信息，确定所述在数据库主库和所述数据库备库中数据一致。
最新发布
01-25
### 提高MySQL/MariaDB备库（从库）的写入性能 为了提升备库的写入性能，可以从多个方面入手： - **并行复制**：启用多线程应用 (MTS)，即 `slave_parallel_workers` 参数配置为大于零的数值。这使得多个I/O操作可以在不同的数据库对象上并发执行，从而显著加快了重放 binlog 的速度[^1]。 ```sql SET GLOBAL slave_parallel_workers = 8; ``` - **优化InnoDB缓冲池预加载**：通过调整 InnoDB 缓冲区大小 (`innodb_buffer_pool_size`) 和预先加载热数据到缓存中 (`innodb_buffer_pool_load_at_startup`, `innodb_buffer_pool_dump_pct`) 来减少磁盘 I/O 开销，进而加速写入过程。 - **批量处理事务**：确保主服务器端启用了 `binlog_group_commit_sync_delay` 及其配套参数 `binlog_group_commit_sync_no_delay_count` ，这样可以让更多的更改被批量化提交至二进制日志文件，减少了每次单独刷盘带来的开销。 - **硬件升级**：增加 SSD 或者 NVMe 这样的高性能存储设备作为临时目录 `/tmp` 所在路径；另外考虑采用 RAID 配置以增强 IO 性能。 ### 自动切换主库为只读模式 对于自动检测主从延迟并将主节点设为只读的操作，可以通过编写脚本配合 MySQL 内建函数实现这一目标。下面给出 Python 脚本示例用于监控主从延时情况，并根据条件改变 master 数据库的状态： ```python import pymysql from time import sleep def check_replication_lag(cursor): cursor.execute('SHOW SLAVE STATUS') result = cursor.fetchone() if not result['Seconds_Behind_Master']: return False lag_time = int(result['Seconds_Behind_Master']) threshold = 60 * 5 # 设定最大容忍时间为五分钟 return True if lag_time >= threshold else False conn_master = pymysql.connect(host='master_host', user='root', password='password') with conn_master.cursor() as cur: while True: is_lagging = check_replication_lag(cur) if is_lagging and 'READ ONLY' != get_global_variable_value(conn_master, '@@global.read_only'): set_readonly_mode(conn_master) elif not is_lagging and 'OFF' == get_global_variable_value(conn_master, '@@global.read_only'): unset_readonly_mode(conn_master) sleep(60) def get_global_variable_value(connection, variable_name): with connection.cursor() as c: c.execute(f'SELECT @@{variable_name}') value = c.fetchone()[f'{variable_name}'] return value def set_readonly_mode(connection): with connection.cursor() as c: c.execute('SET GLOBAL read_only=ON') def unset_readonly_mode(connection): with connection.cursor() as c: c.execute('SET GLOBAL read_only=OFF') ``` 此代码片段展示了如何周期性地检查主从之间的延迟时间，并依据特定阈值决定是否应该激活全局变量 `read_only` 。需要注意的是，在实际部署之前应当充分测试该逻辑以防止意外行为发生。 ### 确保主库和备库之间的一致性 利用 GTID （Global Transaction Identifiers）可以简化管理流程并且更好地维护一致性。GTID 是一种唯一标识符，它能够跟踪每条已应用于任何给定实例上的语句序列号。一旦开启了 GTID 支持，则不再需要手动指定基于位置的日志坐标来进行增量备份或恢复工作[^3]。 要开启 GTID 功能，需编辑 my.cnf 文件中的 `[mysqld]` 段落部分如下所示： ```ini server-id = 1 gtid-mode = ON enforce-gtid-consistency= true log-bin = /var/log/mysql/bin.log master-info-repository = TABLE relay-log-info-repository=TABLE sync-master-info = 1 binlog-format = ROW ``` 重启服务使上述变更生效后，即可创建新的 Slave 并指明 Master 地址而无需关心具体的 Binlog 坐标信息。此外，建议定期验证两者的同步状态，可通过命令 `SHOW MASTER STATUS;` 查看当前正在使用的 Binary Log 名字及其 Position，对比于 Slave 上的结果确认二者保持一致。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值