MySQL time那些事儿

1.timeout变量知多少

打开mysql,用show variables like '%timeout%'命令一看,不看不知道,一看吓一跳,结果如下面所示,这么多timeout相关变量,一下就吓尿了。。原来对mysql的了解原来是如此的不够,好了,这么些timeout究竟各自是什么意思,花了一下午去学习,做了几个小实验,总算明白了一二,如有错误,请不吝赐教啊。

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
mysql> show variables like '%timeout%' ;
+ -----------------------------+----------+
| Variable_name               | Value    |
+ -----------------------------+----------+
| connect_timeout             | 10       |
| delayed_insert_timeout      | 300      |
| innodb_flush_log_at_timeout | 1        |
| innodb_lock_wait_timeout    | 50       |
| innodb_rollback_on_timeout  | OFF      |
| interactive_timeout         | 28800    |
| lock_wait_timeout           | 31536000 |
| net_read_timeout            | 30       |
| net_write_timeout           | 60       |
| rpl_stop_slave_timeout      | 31536000 |
| slave_net_timeout           | 3600     |
| wait_timeout                | 28800    |
+ -----------------------------+----------+

2.分析

下面从timeout里面找些比较常用的出来逐个分析下。

2.1 connect_timeout

connect_timeout指的是连接过程中握手的超时时间,在5.0.52以后默认为10秒,之前版本默认是5秒。官方文档是这样说的:

1
connect_timeout: The number of seconds that the mysqld server waits for a connect packet before responding with Bad handshake. The default value is 10 seconds as of MySQL 5.0.52 and 5 seconds before that

mysql的基本原理应该是有个监听线程循环接收请求,当有请求来时,创建线程(或者从线程池中取)来处理这个请求。由于mysql连接采用TCP协议,那么之前势必是需要进行TCP三次握手的。TCP三次握手成功之后,客户端会进入阻塞,等待服务端的消息。服务端这个时候会创建一个线程(或者从线程池中取一个线程)来处理请求,主要验证部分包括host和用户名密码验证。host验证我们比较熟悉,因为在用grant命令授权用户的时候是有指定host的。用户名密码认证则是服务端先生成一个随机数发送给客户端,客户端用该随机数和密码进行多次sha1加密后发送给服务端验证。如果通过,整个连接握手过程完成。(具体握手过程后续找到资料再分析)

由此可见,整个连接握手可能会有各种可能出错。所以这个connect_timeout值就是指这个超时时间了。可以简单测试下,运行下面的telnet命令会发现客户端会在10秒后超时返回。


1
telnet localhost 3306

在超时之前mysql中该连接状态如下:


1
256 | unauthenticated user | localhost:60595 | NULL | Connect | NULL | Reading from net | NULL

2.2 interactive_timeout & wait_timeout

还是先看官方文档,从文档上来看wait_timeout和interactive_timeout都是指不活跃的连接超时时间,连接线程启动的时候wait_timeout会根据是交互模式还是非交互模式被设置为这两个值中的一个。如果我们运行mysql -uroot -p命令登陆到mysql,wait_timeout就会被设置为interactive_timeout的值。如果我们在wait_timeout时间内没有进行任何操作,那么再次操作的时候就会提示超时,这是mysql client会重新连接。


1
2
3
The number of seconds the server waits for activity on a noninteractive connection before closing it.
 
On thread startup, the session wait_timeout value is initialized from the global wait_timeout value or from the global interactive_timeout value, depending on the type of client ( as defined by the CLIENT_INTERACTIVE connect option to mysql_real_connect()).

测试如下:


1
mysql> set global interactive_timeout=3; ##设置交互超时为3秒

重新进入mysql,这时候可以看到:


1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
mysql> show variables like '%timeout%' ; ##wait_timeout已经被设置为3秒
+ -----------------------------+----------+
| Variable_name               | Value    |
+ -----------------------------+----------+
| connect_timeout             | 10       |
| delayed_insert_timeout      | 300      |
| innodb_flush_log_at_timeout | 1        |
| innodb_lock_wait_timeout    | 50       |
| innodb_rollback_on_timeout  | OFF      |
| interactive_timeout         | 3        |
| lock_wait_timeout           | 31536000 |
| net_read_timeout            | 30       |
| net_write_timeout           | 3        |
| rpl_stop_slave_timeout      | 31536000 |
| slave_net_timeout           | 3600     |
| wait_timeout                | 3        |
+ -----------------------------+----------+

可以看到wait_timeout被设置为了interactive_timeout的值,这样,我们3秒后再执行其他命令,会提示如下:


1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
mysql> show variables like '%timeout%' ;
ERROR 2006 (HY000): MySQL server has gone away  ##超时重连
No connection . Trying to reconnect...
Connection id:    50
Current database : *** NONE ***
 
+ -----------------------------+----------+
| Variable_name               | Value    |
+ -----------------------------+----------+
| connect_timeout             | 10       |
| delayed_insert_timeout      | 300      |
| innodb_flush_log_at_timeout | 1        |
| innodb_lock_wait_timeout    | 50       |
| innodb_rollback_on_timeout  | OFF      |
| interactive_timeout         | 3        |
| lock_wait_timeout           | 31536000 |
| net_read_timeout            | 30       |
| net_write_timeout           | 3        |
| rpl_stop_slave_timeout      | 31536000 |
| slave_net_timeout           | 3600     |
| wait_timeout                | 3        |
+ -----------------------------+----------+

2.3 innodb_lock_wait_timeout & innodb_rollback_on_timeout

还是先祭出官方文档,从文档中看,这个值是针对innodb引擎的,是innodb中行锁的等待超时时间,默认为50秒。如果超时,则当前语句会回滚。如果设置了innodb_rollback_on_timeout,则会回滚整个事务,否则,只回滚事务等待行锁的这个语句。


1
2
3
The length of time in seconds an InnoDB transaction waits for a row lock before giving up. The default value is 50 seconds. A transaction that tries to access a row that is locked by another InnoDB transaction waits at most this many seconds for write access to the row before issuing the following error:
 
ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction

同样来测试下(先创建一个innodb引擎的表test,只有一列,列名为a):


1
mysql> CREATE TABLE `test` ( `a` int primary key ) engine=innodb;

首先插入三条测试数据


1
2
3
4
5
6
7
mysql> select * from test;
+ ---+
| a |
+ ---+
| 1 |
| 2 |
| 3 |

当前innodb_rollback_on_timeout=OFF,设置innodb_lock_wait_timeout=1,我们开启两个事务


1
2
3
4
5
6
7
8
9
10
11
##事务1 加行锁
mysql> begin ;
Query OK, 0 rows affected (0.00 sec)
 
mysql> select * from test where a=2 for update ;
+ ---+
| a |
+ ---+
| 2 |
+ ---+
1 row in set (0.01 sec)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
##事务2,请求行锁
mysql> begin ;
Query OK, 0 rows affected (0.00 sec)
 
mysql> delete from test where a=1;
Query OK, 1 row affected (0.00 sec)
 
mysql> delete from test where a=2; ##请求行锁超时
ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction
mysql> select * from test;
+ ---+
| a |
+ ---+
| 2 |
| 3 |
+ ---+
2 rows in set (0.00 sec)
 
mysql> begin ; ##这里我们直接开启另外的事务,则原来的事务只会回滚第二条语句,最终结果就是test表中只剩下2和3.如果这里我们显示的 rollback ,则会回滚整个事务,保持1,2,3不变。

那么如果innodb_rollback_on_timeout=ON,同样事务2会超时,但是这个时候如果我们begin开启新的事务,那么会回滚请求锁超时的整个事务,而不是像前面那样只回滚了超时的那条语句。

2.4 lock_wait_timeout

文档中描述如下,简单说来lock_wait_timeout是元数据锁等待超时,任意锁元数据的语句都会用到这个超时参数,默认为一年。元数据锁可以参加mysql metadata lock,为了保证事务可串行化,不管是myisam还是innodb引擎的表,只要是开始一个事务,就会获取操作表的元数据锁,这时候如果另一个事务要对表的元数据进行修改,则会阻塞直到超时。


1
2
3
This variable specifies the timeout in seconds for attempts to acquire metadata locks. The permissible values range from 1 to 31536000 (1 year ). The default is 31536000.
 
This timeout applies to all statements that use metadata locks. These include DML and DDL operations on tables, views, stored procedures, and stored functions, as well as LOCK TABLES, FLUSH TABLES WITH READ LOCK, and HANDLER statements

测试例子:我们用一个myisam引擎的表myisam_test来测试。其中有一条记录(1,1),现在我们先开启一个事务,然后执行一个select语句。另外打开一个session,然后执行表的元数据操作,如删除表,会发现操作阻塞直到lock_wait_timeout秒后提示超时。


1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
##第一个session,获取metadata lock
mysql> show create table myisam_test;
-----------------------------------------------------------+
| Table       | Create Table                                                                                                                                |
+ -----------------------------------------------------------
| myisam_test | CREATE TABLE `myisam_test` (
   `i` int (11) NOT NULL ,
   `j` int (11) DEFAULT NULL ,
   PRIMARY KEY (`i`)
) ENGINE=MyISAM DEFAULT CHARSET=latin1
 
mysql> start transaction ;
Query OK, 0 rows affected (0.00 sec)
 
mysql> select * from myisam_test;
+ ---+------+
| i | j    |
+ ---+------+
| 2 |    1 |
+ ---+------+
1 row in set (0.00 sec)
 
##另一个session,删除表提示超时
mysql> drop table myisam_test;
ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction

其中更改表结构的元数据操作指令有如下这些:


1
2
3
4
5
DROP TABLE t;
ALTER TABLE t ...;
DROP TABLE nt;
ALTER TABLE nt ...;
LOCK TABLE t ... WRITE;

当然,多说一句,对于myisam表的加锁以及并发插入等,这篇博客myisam表锁非常详细,有兴趣的可以看看。

2.5 net_read_timeout & net_write_timeout

文档中描述如下,就是说这两个参数在网络条件不好的情况下起作用。比如我在客户端用load data infile的方式导入很大的一个文件到数据库中,然后中途用iptables禁用掉mysql的3306端口,这个时候服务器端该连接状态是reading from net,在等待net_read_timeout后关闭该连接。同理,在程序里面查询一个很大的表时,在查询过程中同样禁用掉端口,制造网络不通的情况,这样该连接状态是writing to net,然后在net_write_timeout后关闭该连接。slave_net_timeout类似。


1
The number of seconds to wait for more data from a connection before aborting the read . When the server is reading from the client, net_read_timeout is the timeout value controlling when to abort. When the server is writing to the client, net_write_timeout is the timeout value controlling when to abort

测试:我创建一个120M的数据文件data.txt。然后登陆到mysql。


1
mysql -uroot -h 127.0.0.1 -P 3306 --local-infile=1

导入过程设置iptables禁用3306端口。


1
2
iptables -A INPUT -p tcp --dport 3306 -j DROP
iptables -A OUTPUT -p tcp --sport 3306 -j DROP

可以看到连接状态为reading from net,然后经过net_read_timeout秒后关闭。

3.总结

经过几个实验可以发现,connect_timeout在握手认证阶段(authenticate)起作用,interactive_timeout 和wait_timeout在连接空闲阶段(sleep)起作用,而net_read_timeout和net_write_timeout则是在连接繁忙阶段(query)或者网络出现问题时起作用。

### 如何批量终止数据库连接或进程 在 MySQL 数据库中,可以通过 `KILL CONNECTION` 或者 `KILL QUERY` 命令来终止特定的查询或会话。为了实现批量终止多个连接或进程的操作,通常需要结合 SQL 查询获取目标会话的信息并动态生成相应的命令。 #### 获取当前活跃会话信息 首先,可以利用以下 SQL 查询来查看当前所有的连接及其相关信息: ```sql SELECT id, user, host, db, command, time, state, info FROM information_schema.processlist; ``` 此查询返回的结果包含了每个连接的唯一标识符 (`id`)、用户名称 (`user`)、主机地址 (`host`) 等重要字段[^1]。 #### 动态生成 KILL 语句 基于上述查询结果,可以根据某些条件筛选出需要被杀死的目标会话,并构建对应的 `KILL CONNECTION` 命令。例如: 假设我们希望根据某个用户的连接全部关闭,则可以用如下脚本完成这一需求: ```bash mysql -u root -p -e "SELECT CONCAT('KILL ', id, ';') AS kill_command FROM information_schema.processlist WHERE user='target_user';" | mysql -u root -p ``` 这里需要注意的是,在实际生产环境中应当谨慎操作此类命令以免误伤正常业务流程中的合法请求。 对于 PostgreSQL 来说,存在类似的机制但是采用了不同的命名约定以及行为定义。比如使用 `pg_terminate_backend(pid)` 函数可以直接结束指定 PID 对应的后端进程;而如果只是想中断正在进行中的事务而不完全切断链接则可以选择调用 `pg_cancel_backend(pid)` 方法[^2]。 另外值得注意的一点是在 Oracle 数据库里虽然没有直接提供像MySQL那样的简单语法来做这件事儿,不过它有一个叫做 Process Monitor 的内部组件专门用来监控和清理那些意外崩溃掉的服务程序实例或者是人为下达指令要求销毁的对象实体们。当任何一个服务进程非正常退出之后,这个守护线程就会自动介入进来做必要的善后工作比如说更新数据字典状态标记位呀之类的动作[^3]。 最后提醒一下大家,在执行任何大规模删除之前最好先做好充分准备——确认好哪些是要保留下来的合法流量源地址范围列表之类的东西以便于后续排查问题时候能够快速定位到真正有问题的那个部分上去而不是一刀切地把所有东西都给干掉了哦! 同时也可以考虑建立一套黑名单管理系统用于记录反复出现问题的历史记录从而达到预防的目的[^4]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值