Lost connection to MySQL server during query的几种可能分析

在使用navicat导出查询结果时，发现一段时间后就断开连接了，报错：[Msg] [Exp] 2013 - Lost connection to MySQL Server during query

开始以为是max_allowed_packet设置过小导致，所以加大了max_allowed_packet，但是还是一样报错，因此问题跟max_allowed_packet没有关系。后面成功导出数据后，导出的文件也不大12、3M大小，而max_allowed_packet默认值是16M，完全够这次导出使用。

后来经过分析，我这设置了net_write_timeout参数后，成功导出，完成后，仔细想了一下，做了如下的总结。

报错的意思是在查询的过程中与Mysql断开了连接，而可能产生断开连接的原因总结如下：

1，mysql服务宕了
2，客户端的连接线程被kill掉了
3，在查询过程中设置了防火墙
4，当查询的结果集超过 max_allowed_packet
5，mysql的timeout参数

下面我们挨个验证一下：
1，mysql服务宕了
在导出的过程中，我们连接上去做个简单查询，show global status like ‘uptime’;
本次导出过程中mysql服务正常

2，客户端的连接线程被kill掉了
有些mysql中有相关的设置，比如有相关的pt-kill，kill掉运行时间超过多长的sql，或是有dba在优化mysql，把这个查询sql给kill了
本次导出中并没有相关，因此也排除这种可能

3，在查询过程中设置了防火墙
本次导出过程中，并没有运维或是管理人员设置防火墙，或是调整防火墙

4，当查询的结果集超过 max_allowed_packet
上面我们已经加大了max_allowed_packet，可以用select * into outfile 的方式导出到文件，查看文件大小是否超过 max_allowed_packet

5，mysql的timeout参数

mysql> show variables like '%timeout%';
+-----------------------------+----------+
| Variable_name               | Value    |
+-----------------------------+----------+
| connect_timeout             | 10       |
| delayed_insert_timeout      | 300      |
| have_statement_timeout      | YES      |
| innodb_flush_log_at_timeout | 1        |
| innodb_lock_wait_timeout    | 60       |
| innodb_rollback_on_timeout  | OFF      |
| interactive_timeout         | 28800    |
| lock_wait_timeout           | 31536000 |
| net_read_timeout            | 30       |
| net_write_timeout           | 60       |
| rpl_stop_slave_timeout      | 31536000 |
| slave_net_timeout           | 60       |
| wait_timeout                | 28800    |
+-----------------------------+----------+
13 rows in set (0.01 sec)

下面从timeout里面找些比较常用的出来逐个分析下。

connect_timeout官方文档如下：

connect_timeout: The number of seconds that the mysqld server waits for a connect packet before responding with Bad handshake. The default value is 10 seconds as of MySQL 5.0.52 and 5 seconds before that

指的是连接过程中握手的超时时间，在5.0.52以后默认为10秒，之前版本默认是5秒。mysql的基本原理应该是有个监听线程循环接收请求，当有请求来时，创建线程（或者从线程池中取）来处理这个请求。由于mysql连接采用tcp协议，那么之前势必是需要进行TCP三次握手的。TCP三次握手成功之后，客户端会进入阻塞，等待服务端的消息。服务端这个时候会创建一个线程(或者从线程池中取一个线程)来处理请求，主要验证部分包括host和用户名密码验证。host验证我们比较熟悉，因为在用grant命令授权用户的时候是有指定host的。用户名密码认证则是服务端先生成一个随机数发送给客户端，客户端用该随机数和密码进行多次sha1加密后发送给服务端验证。如果通过，整个连接握手过程完成。（具体握手过程后续找到资料再分析）

由此可见，整个连接握手可能会有各种可能出错。所以这个connect_timeout值就是指这个超时时间了。可以简单测试下，运行下面的telnet命令会发现客户端会在10秒后超时返回。

telnet localhost 3306

在超时之前mysql中该连接状态如下：

 | unauthenticated user | localhost:60595 | NULL | Connect | NULL | Reading from net | NULL

interactive_timeout & wait_timeout官方文档如下：

The number of seconds the server waits for activity on a noninteractive connection before closing it.On thread startup, the session wait_timeout value is initialized from the global wait_timeout value or from the global interactive_timeout value, depending on the type of client (as defined by the CLIENT_INTERACTIVE connect option to mysql_real_connect()).

wait_timeout和interactive_timeout都是指不活跃的连接超时时间，连接线程启动的时候wait_timeout会根据是交互模式还是非交互模式被设置为这两个值中的一个。如果我们运行mysql -uroot -p命令登陆到mysql，wait_timeout就会被设置为interactive_timeout的值。如果我们在wait_timeout时间内没有进行任何操作，那么再次操作的时候就会提示超时，这是mysql client会重新连接。

测试如下：

mysql> set global interactive_timeout=3; ##设置交互超时为3秒

重新进入mysql，这时候可以看到：

mysql> show variables like '%timeout%'; ##wait_timeout已经被设置为3秒+-----------------------------+----------+| Variable_name               | Value    |+-----------------------------+----------+| connect_timeout             | 10       || delayed_insert_timeout      | 300      || innodb_flush_log_at_timeout | 1        || innodb_lock_wait_timeout    | 50       || innodb_rollback_on_timeout  | OFF      || interactive_timeout         | 3        || lock_wait_timeout           | 31536000 || net_read_timeout            | 30       || net_write_timeout           | 3        || rpl_stop_slave_timeout      | 31536000 || slave_net_timeout           | 3600     || wait_timeout                | 3        |+-----------------------------+----------+

可以看到wait_timeout被设置为了interactive_timeout的值，这样，我们3秒后再执行其他命令，会提示如下：

mysql> show variables like '%timeout%';ERROR 2006 (HY000): MySQL server has Gone away  ##超时重连No connection. Trying to reconnect...Connection id:    50Current database: *** NONE ***+-----------------------------+----------+| Variable_name               | Value    |+-----------------------------+----------+| connect_timeout             | 10       || delayed_insert_timeout      | 300      || innodb_flush_log_at_timeout | 1        || innodb_lock_wait_timeout    | 50       || innodb_rollback_on_timeout  | OFF      || interactive_timeout         | 3        || lock_wait_timeout           | 31536000 || net_read_timeout            | 30       || net_write_timeout           | 3        || rpl_stop_slave_timeout      | 31536000 || slave_net_timeout           | 3600     || wait_timeout                | 3        |+-----------------------------+----------+

innodb_lock_wait_timeout & innodb_rollback_on_timeout官方文档如下：

The length of time in seconds an InnoDB transaction waits for a row lock before giving up. The default value is 50 seconds. A transaction that tries to access a row that is locked by another InnoDB transaction waits at most this many seconds for write access to the row before issuing the following error:ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction

这个值是针对innodb引擎的，是innodb中行锁的等待超时时间，默认为50秒。如果超时，则当前语句会回滚。如果设置了innodb_rollback_on_timeout，则会回滚整个事务，否则，只回滚事务等待行锁的这个语句。

测试如下(先创建一个innodb引擎的表test，只有一列，列名为a)：

mysql> CREATE TABLE `test` ( `a` int primary key) engine=innodb;

首先插入三条测试数据

mysql> select * from test;+---+| a |+---+| 1 || 2 || 3 |

当前innodb_rollback_on_timeout=OFF，设置innodb_lock_wait_timeout=1，我们开启两个事务

##事务1 加行锁

mysql> begin;Query OK, 0 rows affected (0.00 sec)mysql> select * from test where a=2 for update;+---+| a |+---+| 2 |+---+1 row in set (0.01 sec)

##事务2，请求行锁

mysql> begin;Query OK, 0 rows affected (0.00 sec)mysql> delete from test where a=1;Query OK, 1 row affected (0.00 sec)mysql> delete from test where a=2; ##请求行锁超时ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transactionmysql> select * from test;+---+| a |+---+| 2 || 3 |+---+2 rows in set (0.00 sec)

mysql> begin; ##这里我们直接开启另外的事务，则原来的事务只会回滚第二条语句，最终结果就是test表中只剩下2和3.如果这里我们显示的rollback，则会回滚整个事务，保持1，2，3不变。

lock_wait_timeout官方文档如下：

This variable specifies the timeout in seconds for attempts to acquire metadata locks. The permissible values range from 1 to 31536000 (1 year). The default is 31536000.This timeout applies to all statements that use metadata locks. These include DML and DDL operations on tables, views, stored procedures, and stored functions, as well as LOCK TABLES, FLUSH TABLES WITH READ LOCK, and HANDLER statements

lock_wait_timeout是元数据锁等待超时，任意锁元数据的语句都会用到这个超时参数，默认为一年。元数据锁可以参加mysql metadata lock，为了保证事务可串行化，不管是myisam还是innodb引擎的表，只要是开始一个事务，就会获取操作表的元数据锁，这时候如果另一个事务要对表的元数据进行修改，则会阻塞直到超时。

测试如下：
我们用一个myisam引擎的表myisam_test来测试。其中有一条记录(1,1)，现在我们先开启一个事务，然后执行一个select语句。另外打开一个session，然后执行表的元数据操作，如删除表，会发现操作阻塞直到lock_wait_timeout秒后提示超时。

##第一个session，获取metadata lock

mysql> show create table myisam_test;-----------------------------------------------------------+| Table       | Create Table                                                                                                                                |+-----------------------------------------------------------| myisam_test | CREATE TABLE `myisam_test` (  `i` int(11) NOT NULL,  `j` int(11) DEFAULT NULL,  PRIMARY KEY (`i`)) ENGINE=MyISAM DEFAULT CHARSET=latin1mysql> start transaction;Query OK, 0 rows affected (0.00 sec)mysql> select * from myisam_test;+---+------+| i | j    |+---+------+| 2 |    1 |+---+------+1 row in set (0.00 sec)

##另一个session，删除表提示超时

mysql> drop table myisam_test;ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction

其中更改表结构的元数据操作指令有如下这些：
DROP TABLE t;
ALTER TABLE t …;
DROP TABLE nt;
ALTER TABLE nt …;
LOCK TABLE t … WRITE；

net_read_timeout & net_write_timeout官方文档如下：

The number of seconds to wait for more data from a connection before aborting the read. When the server is reading from the client, net_read_timeout is the timeout value controlling when to abort. When the server is writing to the client, net_write_timeout is the timeout value controlling when to abort

这两个参数在网络条件不好的情况下起作用。比如我在客户端用load data infile的方式导入很大的一个文件到数据库中，然后中途用iptables禁用掉mysql的3306端口，这个时候服务器端该连接状态是reading from net，在等待net_read_timeout后关闭该连接。同理，在程序里面查询一个很大的表时，在查询过程中同样禁用掉端口，制造网络不通的情况，这样该连接状态是writing to net，然后在net_write_timeout后关闭该连接。slave_net_timeout类似。

测试如下：我创建一个120M的数据文件data.txt。然后登陆到mysql。

mysql -uroot -h 127.0.0.1 -P 3306 --local-infile=1

导入过程设置iptables禁用3306端口。

iptables -A INPUT -p tcp --dport 3306 -j DROPiptables -A OUTPUT -p tcp --sport 3306 -j DROP

可以看到连接状态为reading from net，然后经过net_read_timeout秒后关闭。

总结

经过几个实验可以发现，
connect_timeout在握手认证阶段（authenticate）起作用
interactive_timeout 和wait_timeout在连接空闲阶段（sleep）起作用
net_read_timeout和net_write_timeout则是在连接繁忙阶段（query）或者网络出现问题时起作用。

我们是在导出数据，所以只有net_read_timeout和net_write_timeout参数可能对我们有影响，我们是在导出数据，因此调整net_write_timeout参数，完成后，顺利导出。

关于timeout参考如下：

 mysql timeout知多少 - whitesky-root - 博客园

解决Lost connection to MySQL server during query错误方法_benben0729的博客-CSDN博客

来源地址：https://blog.csdn.net/lovedingd/article/details/125662054