mysqldump

本文详细探讨了mysqldump的各种工作模式,并与mk-parallel-dump进行了性能比较,重点关注InnoDB表的一致性备份。
<p><span class=style1>作/译者:叶金荣(Email: <img src="http://image2.360doc.com/DownloadImg/2008/12/2/36491_2038379_1.gif" border=0>),来源:<a href="http://imysql.cn/">http://imysql.cn</a>,转载请注明作/译者和出处,并且不能用于商业用途,违者必究。</span></p>

<h1>0、前言</h1>

<p>本文主要探讨 <em>mysqldump</em> 的几种主要工作方式,并且比较一下和 <em><a href="http://www.maatkit.org/tools.html" target=_blank>mk-parralel-dump</a></em> 的一些差异,为备份方式的选择提供更多的帮助。</p>

<p>  </p>

<h1>1、mysqldump</h1>

<p>首先来看下 <em>mysqldump</em> 的几个主要参数的实际工作方式。</p>

<h2>mysqldump 几个主要选项<br>1. -q<br>很简单,什么都不做,只是导出时加了一个 <strong>SQL_NO_CACHE</strong> 来确保不会读取缓存里的数据。

<p> </p>

<pre class=plaintext_pre>081022 17:39:33 7 Connect root@localhost on

7 Query /*!40100 SET @@SQL_MODE='' */

7 Init DB yejr

7 Query SHOW TABLES LIKE 'yejr'

7 Query LOCK TABLES `yejr` READ /*!32311 LOCAL */

7 Query SET OPTION SQL_QUOTE_SHOW_CREATE=1

7 Query show create table `yejr`

7 Query show fields from `yejr`

7 Query show table status like 'yejr'

7 Query SELECT /*!40001 SQL_NO_CACHE */ * FROM `yejr`

7 Query UNLOCK TABLES

7 Quit

</pre>

<p>2. --lock-tables<br>跟上面类似,不过多加了一个 <strong>READ LOCAL LOCK</strong>,该锁不会阻止读,也不会阻止新的数据插入。 </p>

<pre class=plaintext_pre>081022 17:36:21 5 Connect root@localhost on

5 Query /*!40100 SET @@SQL_MODE='' */

5 Init DB yejr

5 Query SHOW TABLES LIKE 'yejr'

5 Query LOCK TABLES `yejr` READ /*!32311 LOCAL */

5 Query SET OPTION SQL_QUOTE_SHOW_CREATE=1

5 Query show create table `yejr`

5 Query show fields from `yejr`

5 Query show table status like 'yejr'

5 Query SELECT /*!40001 SQL_NO_CACHE */ * FROM `yejr`

5 Query UNLOCK TABLES

5 Quit

</pre>

<p>3. --lock-all-tables<br>这个就有点不太一样了,它请求发起一个全局的读锁,会阻止对所有表的写入操作,以此来确保数据的一致性。备份完成后,该会话断开,会自动解锁。 </p>

<pre class=plaintext_pre>081022 17:36:55 6 Connect root@localhost on

6 Query /*!40100 SET @@SQL_MODE='' */

6 Query FLUSH TABLES

6 Query FLUSH TABLES WITH READ LOCK

6 Init DB yejr

6 Query SHOW TABLES LIKE 'yejr'

6 Query SET OPTION SQL_QUOTE_SHOW_CREATE=1

6 Query show create table `yejr`

6 Query show fields from `yejr`

6 Query show table status like 'yejr'

6 Query SELECT /*!40001 SQL_NO_CACHE */ * FROM `yejr`

6 Quit

</pre>

<p>4. --master-data<br>除了和刚才的 --lock-all-tables 多了个 <strong>SHOW MASTER STATUS</strong> 之外,没有别的变化。 </p>

<pre class=plaintext_pre>081022 17:59:02 1 Connect root@localhost on

1 Query /*!40100 SET @@SQL_MODE='' */

1 Query FLUSH TABLES

1 Query FLUSH TABLES WITH READ LOCK

1 Query SHOW MASTER STATUS

1 Init DB yejr

1 Query SHOW TABLES LIKE 'yejr'

1 Query SET OPTION SQL_QUOTE_SHOW_CREATE=1

1 Query show create table `yejr`

1 Query show fields from `yejr`

1 Query show table status like 'yejr'

1 Query SELECT /*!40001 SQL_NO_CACHE */ * FROM `yejr`

1 Quit

</pre>

<p>5. --single-transaction </p>

</h2>

<p>InnoDB 表在备份时,通常启用选项 <em>--single-transaction</em> 来保证备份的一致性,实际上它的工作原理是设定本次会话的隔离级别为:REPEATABLE READ,以确保本次会话(dump)时,不会看到其他会话已经提交了的数据。</p>

<pre class=plaintext_pre>081022 17:23:35 1 Connect root@localhost on

1 Query /*!40100 SET @@SQL_MODE='' */

1 Query SET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ

1 Query BEGIN

1 Query UNLOCK TABLES

1 Init DB yejr

1 Query SHOW TABLES LIKE 'yejr'

1 Query SET OPTION SQL_QUOTE_SHOW_CREATE=1

1 Query show create table `yejr`

1 Query show fields from `yejr`

1 Query show table status like 'yejr'

1 Query SELECT /*!40001 SQL_NO_CACHE */ * FROM `yejr`

1 Quit

</pre>

<p>6. --single-transaction and --master-data<br>本例中,由于增加了选项 <em>--master-data</em>,因此还需要提交一个快速的全局读锁。在这里,可以看到和上面的不同之处在于少了发起 <strong>BEGIN</strong> 来显式声明事务的开始。这里采用 <strong>START TRANSACTION WITH CONSISTENT SNAPSHOT</strong> 来代替 <strong>BEGIN</strong> 的做法的缘故不是太了解,可以看看源代码来分析下。 </p>

<pre class=plaintext_pre>081022 17:27:07 2 Connect root@localhost on

2 Query /*!40100 SET @@SQL_MODE='' */

2 Query FLUSH TABLES

2 Query FLUSH TABLES WITH READ LOCK

2 Query SET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ

2 Query START TRANSACTION WITH CONSISTENT SNAPSHOT

2 Query SHOW MASTER STATUS

2 Query UNLOCK TABLES

2 Init DB yejr

2 Query SHOW TABLES LIKE 'yejr'

2 Query SET OPTION SQL_QUOTE_SHOW_CREATE=1

2 Query show create table `yejr`

2 Query show fields from `yejr`

2 Query show table status like 'yejr'

2 Query SELECT /*!40001 SQL_NO_CACHE */ * FROM `yejr`

2 Quit

</pre>

<p>关于隔离级别可以看手册 <a href="http://dev.mysql.com/doc/refman/5.0/en/innodb-transaction-isolation.html" target=_blan>13.2.10.3. InnoDB and TRANSACTION ISOLATION LEVEL</a>,或者本站之前的文章:<a href="http://imysql.cn/2008_07_10_innodb_tx_isolation_and_lock_mode" target=_blan>[InnoDB系列] - 实例解析Innodb的隔离级别以及锁模式</a>。 </p>

<p>关于 <strong>START TRANSACTION WITH CONSISTENT SNAPSHOT</strong> 的说明可以看下手册描述: </p>

<pre class=plaintext_pre>The WITH CONSISTENT SNAPSHOT clause starts a consistent read for storage engines that are capable of it. This applies only to InnoDB. The effect is the same as issuing a START TRANSACTION followed by a SELECT from any InnoDB table. See Section 13.2.10.4, “Consistent Non-Locking Read”. The WITH CONSISTENT SNAPSHOT clause does not change the current transaction isolation level, so it provides a consistent snapshot only if the current isolation level is one that allows consistent read (REPEATABLE READ or SERIALIZABLE).

</pre>

<p><a href="http://imysql.cn/原文链接:http://dev.mysql.com/doc/refman/5.0/en/commit.html" target=_blank>12.4.1. START TRANSACTION, COMMIT, and ROLLBACK Syntax</a></p>

<p>  </p>

<h1>2. mysqldump 和 mk-parralel-dump 的比较</h1>

<p><em>mk-parralel-dump</em> 是开源项目 <a href="http://www.maatkit.org/" target=_blank>Maatkit</a> 中的一个工具,主要由 <a href="http://www.xaprb.com/blog/" target=_blank>Baron Schwartz</a> 维护。<br><em>mk-parralel-dump</em> 是由 perl 开发的,可以实现并发的导出数据表。具体的功能不细说,自己去看相关文档吧。这里只列出在我的环境下和 <em>mysqldump</em> 的对比数据。</p>

<h2>2.1 mysqldump 常规使用</h2>

<pre class=plaintext_pre>#导出耗时

time mysqldump -f --single-transaction -B yejr --tables yejr | gzip > /home/databak/yejr.sql.gz

real 10m15.319s

user 6m47.946s

sys 0m38.496s

#文件大小

608M /home/databak/yejr.sql.gz

#导出期间系统负载

05:00:01 PM all 0.71 0.00 0.61 7.33 91.36

05:10:02 PM all 13.93 0.00 2.21 4.64 79.22

</pre>

<p>  </p>

<h2>2.2 mysqldump + gzip --fast</h2>

<pre class=plaintext_pre>#导出耗时

time mysqldump -f --single-transaction -B yejr --tables yejr | gzip --fast > /home/databak/yejr_fast.sql.gz

real 9m6.248s

user 4m21.467s

sys 0m37.604s

#文件大小

815M Oct 21 17:33 /home/databak/yejr_fast.sql.gz

#导出期间系统负载

05:20:01 PM all 11.94 0.00 2.43 5.69 79.94

05:30:01 PM all 6.46 0.00 1.57 3.95 88.02

</pre>

<p>  </p>

<h2>2.3 mk-parallel-dump 常规使用</h2>

<pre class=plaintext_pre>time ./mk-parallel-dump --database yejr --tables yejr --basedir /home/databak/

default: 25 tables, 25 chunks, 25 successes, 0 failures, 404.93 wall-clock time, 613.25 dump time

real 6m48.763s

user 4m20.724s

sys 0m38.125s

#文件大小

819M /home/databak/default/yejr/

#导出期间系统负载

05:10:02 PM all 13.93 0.00 2.21 4.64 79.22

05:20:01 PM all 11.94 0.00 2.43 5.69 79.94

</pre>

<p>可以看到,mk-parallel-dump 尽快确实实现了并发导出,速度相对快多了,却有个致命伤:那就是它不支持InnoDB的一致性备份,目前已经有人提交相关代码了,不过还没实现,期待中</p>
基于可靠性评估序贯蒙特卡洛模拟法的配电网可靠性评估研究(Matlab代码实现)内容概要:本文围绕“基于可靠性评估序贯蒙特卡洛模拟法的配电网可靠性评估研究”,介绍了利用Matlab代码实现配电网可靠性的仿真分析方法。重点采用序贯蒙特卡洛模拟法对配电网进行长时间段的状态抽样与统计,通过模拟系统元件的故障与修复过程,评估配电网的关键可靠性指标,如系统停电频率、停电持续时间、负荷点可靠性等。该方法能够有效处理复杂网络结构与设备时序特性,提升评估精度,适用于含分布式电源、电动汽车等新型负荷接入的现代配电网。文中提供了完整的Matlab实现代码与案例分析,便于复现和扩展应用。; 适合人群:具备电力系统基础知识和Matlab编程能力的高校研究生、科研人员及电力行业技术人员,尤其适合从事配电网规划、运行与可靠性分析相关工作的人员; 使用场景及目标:①掌握序贯蒙特卡洛模拟法在电力系统可靠性评估中的基本原理与实现流程;②学习如何通过Matlab构建配电网仿真模型并进行状态转移模拟;③应用于含新能源接入的复杂配电网可靠性定量评估与优化设计; 阅读建议:建议结合文中提供的Matlab代码逐段调试运行,理解状态抽样、故障判断、修复逻辑及指标统计的具体实现方式,同时可扩展至不同网络结构或加入更多不确定性因素进行深化研究。
### 使用 `mysqldump` 进行 MySQL 数据库备份的方法 `mysqldump` 是 MySQL 提供的一个非常强大的命令行工具,用于导出数据库内容并生成 SQL 文件。它不仅可以备份单个数据库,还可以同时备份多个数据库或整个 MySQL 服务器的所有数据。 #### 备份单个数据库 要备份一个特定的数据库,可以使用以下命令: ```bash mysqldump -u[用户名] -p [目标数据库名] > [备份文件全路径] ``` 例如,如果用户名为 `root`,要备份名为 `dbname` 的数据库,并将备份文件保存到 `/backup/mysqldump/dbname.db`,则命令如下: ```bash mysqldump -uroot -p dbname > /backup/mysqldump/dbname.db ``` 该命令会在提示输入密码后执行备份操作[^1]。 #### 备份多个数据库 如果需要同时备份多个数据库,可以使用 `--databases` 参数指定多个数据库名称: ```bash mysqldump -u[用户名] -p --databases [数据库名1] [数据库名2] > [备份文件全路径] ``` 例如,备份 `menagerie` 和 `todos` 两个数据库: ```bash mysqldump -uroot -p --databases menagerie todos > menagerie_todos.dump ``` 这种方式可以一次性导出多个数据库的数据[^2]。 #### 备份所有数据库 如果希望备份整个 MySQL 服务器上的所有数据库,可以使用 `--all-databases` 参数: ```bash mysqldump -u[用户名] -p --all-databases > [备份文件全路径] ``` 例如: ```bash mysqldump -uroot -p --all-databases > all.dump ``` 此命令将创建一个包含所有数据库和表结构及其数据的备份文件[^3]。 #### 备份远程数据库 当需要备份远程服务器上的数据库时,可以通过 `-h` 参数指定主机名或 IP 地址: ```bash mysqldump -h[主机名] -u[用户名] -p[密码] [数据库名] > [备份文件全路径] ``` 例如: ```bash mysqldump -hexample.com -uusername -ppassword databasename > backupfile.sql ``` 这种方式适用于远程服务器的数据库备份[^3]。 #### 仅备份数据库结构 如果只需要备份数据库的结构而不包括数据,可以使用 `--no-data` 参数: ```bash mysqldump --no-data --databases [数据库名1] [数据库名2] > [结构备份文件全路径] ``` 例如: ```bash mysqldump --no-data --databases databasename1 databasename2 > structurebackupfile.sql ``` 此命令将仅导出表结构,而不包含任何数据[^3]。 #### 压缩备份 为了节省存储空间,可以在备份时直接将输出通过管道传递给 `gzip` 进行压缩: ```bash mysqldump -u[用户名] -p [数据库名] | gzip > [压缩备份文件全路径] ``` 例如: ```bash mysqldump -uroot -p dbname | gzip > /backup/dbname.sql.gz ``` 这样生成的备份文件将以 `.gz` 格式存储,便于后续恢复和传输[^3]。 #### 添加删除表语句的备份 在某些情况下,可能希望在恢复备份时自动删除已存在的表。为此,可以使用 `--add-drop-table` 参数: ```bash mysqldump --add-drop-table -u[用户名] -p [数据库名] > [带删除语句的备份文件全路径] ``` 例如: ```bash mysqldump --add-drop-table -uroot -p dbname > dbname_with_drop.sql ``` 该命令会在每个 `CREATE TABLE` 语句前添加 `DROP TABLE IF EXISTS` 语句,确保恢复时不会出现表冲突[^3]。 #### 恢复数据库 恢复数据库可以通过以下两种方式之一完成: 1. **使用重定向恢复** ```bash mysql -u[用户名] -p [数据库名] < [备份文件全路径] ``` 例如: ```bash mysql -uroot -p dbname < dbname.db ``` 2. **使用 `source` 命令恢复** ```bash mysql -uroot -p -e "source [备份文件全路径]" [数据库名] ``` 例如: ```bash mysql -uroot -p -e "source dbname.db" dbname ``` 这两种方法都可以有效地将备份文件中的 SQL 内容重新导入到数据库中。 #### 恢复压缩备份 如果备份文件是经过压缩的 `.gz` 文件,则需要先解压再恢复: ```bash gunzip < [压缩备份文件全路径] | mysql -u[用户名] -p [数据库名] ``` 例如: ```bash gunzip < dbname.sql.gz | mysql -uroot -p dbname ``` 该命令会先解压备份文件,然后将其内容导入指定的数据库中。 --- ###
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值