Mysql 百问系列: 连接管理如何高效工作?

2,965 阅读4分钟

问题

1.连接器负责什么?
2.什么是长连接?什么是短连接?
3.什么是连接线程池?
4.平时工作中可以如何优化连接数?

建立连接

连接器负责跟客户端建立连接、获取权限、维持和管理连接。
一般我们会通过以下形式访问数据库。 这种方式为 TCP/IP 方式

mysql -h$ip -P$port -u$user -p

当然如果客户端和数据库都在一台机器上,可以使用Unix Sockets方式

mysql -uroot

建立连接后,连接器会到权限表里面查出你拥有的权限。之后,这个连接里面的权限判断逻辑,都将依赖于此时读到的权限。一个用户成功建立连接后,即使你用管理员账号对这个用户的权限做了修改,也不会影响已经存在连接的权限。修改完成后,只有再新建的连接才会使用新的权限设置。

什么时候断开连接?

根据断开连接的时机,把连接分为:长连接短连接

  • 长连接: 进行连接后,可以发送多次请求,知道客户端手动断开连接。 如果连接后线程一直处于sleep状态(指没有处理任何请求)那么经过wait_timeout时间后将自动断开连接,默认是8小时。
  • 短连接: 进行连接后,发送一次请求后就断开连接。下一次数据库请求必须重新进行连接。

短连接会频繁创建连接,如果在繁忙系统中可能会导致系统端口数被耗尽,从而无法连接。
长连接虽然避免了频繁的创建连接,但是连接过程中请求使用到的内存空间需要到连接关闭才释放。所以如果长连接时间过长,可能会导致数据库内存猛增。
以PHP为例:

  1. 当我们以PHP做为web服务时,一个请求中可能多次访问数据库,查询或者修改数据。一般情况下(不进行特殊设置),都是使用长连接的方式进行访问的。当请求结束,接口返回响应。这个长连接就断开了。可以通过 show processlist 来查看当前所有连接。
  2. 如果利用PHP编写了一个常驻脚本,并且脚本中进行了数据库访问,那么这个长连接可能一直存在着(应该尽量避免这种情况)。

我在项目中碰到过有一个情况是,编写了一个脚本,订阅一个消息队列,从队列消费消息,然后根据消息内容,读写数据库。但是由于前期业务量不足,消息队列可能很长一段时间没有消息消费,超过8小时后就导致了连接自动断开。 对于这种常驻脚本,推荐做法是每隔一段时间手动断开数据库连接,然后重连。或者执行了一些列复杂数据库请求后,断开连接,下次请求时重新连接

什么是连接线程池?

一般情况下,每个连接对应一个线程。
MySQL连接管理器线程负责处理服务器侦听的网络接口上的客户端连接请求。
一旦有连接请求过来就新建线程来处理。但是新建线程的成本是比较昂贵的,所以Mysql使用一个线程池来缓存空闲的线程,以备后来的连接使用。
连接管理线程处理客户端连接请求过程是:
1.查看线程池中是否包含空闲的线程,如果有,取出一个线程给客户端连接请求。
2.如果没有空闲线程,查看已有连接数是否超过了最大连接数,如果没有,则创建新的线程处理客户端连接请求。

如何优化连接

首先有个重要的参数叫max_connections,它指Mysql 最大连接数,例如设置为5,那么最多只有5个客户端可以同时连接。当然Mysql为root用户做了一个特殊处理,当连接数已经满时,root用户还是可以连接上一个。也就是说最大其实可以允许max_connections + 1个root连接。
查看最大连接数

show variables like '%max_connections%';

设置最大连接数,服务重启失效。 如果为了永久生效可以修改.cnf文件。

set GLOBAL max_connections = 200;

我们可以查看过去最大连接数,得到过去最多有过多少连接。

show global status like 'max_used_connections';

那么为了给服务器留有余地,建议 max_used_connections/max_connections = 0.8

查看线程情况

show status like 'Threads%'
  • Threads_cached 标识被缓存的空闲线程数量
  • Threads_connected 表示处于连接状态的线程数量
  • Threads_running 表示正在执行查询,传输数据等操作的线程数量

可以通过控制thread_cache_size来控制缓存线程池的大小。 并发增加的情况下,增加这个值可以改善系统性能。
查看可以缓存多少连接

show global variables like 'thread_cache_size';

总结

  • Mysql 连接分为长连接短连接
  • 连接数量由max_connections控制,合理设置max_connectionsthread_cache_size可以改善系统性能。