阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

MySQL服务器发现大量TIME_WAIT解决办法

235次阅读
没有评论

共计 3838 个字符,预计需要花费 10 分钟才能阅读完成。

有同事就反映公司好几个网站都打不开,登陆 MySQL 数据库。服务器 (Windows), 发现很卡, 于是重启了下服务器,进入系统后,没过一会问题依旧, 查看了下系统进程,发现 MySQL 占用率达到 99%,可以肯定的是 MySQL 连接出现问题:

netstat -an
192.168.12.13:3306      192.168.12.12:30443      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30444      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30445      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30446      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30447      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30448      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30449      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30450      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30451      TIME_WAIT
192.168.12.13:3306      192.168.12.12:30452      TIME_WAIT
… …

根据 TCP 协议定义的 3 次握手断开连接规定, 发起 socket 主动关闭的一方 socket 将进入 TIME_WAIT 状态,TIME_WAIT 状态将持续 2 个 MSL(Max Segment Lifetime), 在 Windows 下默认为 4 分钟, 即 240 秒,TIME_WAIT 状态下的 socket 不能被回收使用. 具体现象是对于一个处理大量短连接的服务器, 如果是由服务器主动关闭客户端的连接, 将导致服务器端存在大量的处于 TIME_WAIT 状态的 socket, 甚至比处于 Established 状态下的 socket 多的多, 严重影响服务器的处理能力, 甚至耗尽可用的 socket, 停止服务. TIME_WAIT 是 TCP 协议用以保证被重新分配的 socket 不会受到之前残留的延迟重发报文影响的机制, 是必要的逻辑保证.
      在 HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcpip\Parameters, 添加名为 TcpTimedWaitDelay 的
DWORD 键, 设置为 60, 以缩短 TIME_WAIT 的等待时间
 
登陆到 Web 服务器(Linux):
   
    netstat -ae |grep mysql
    tcp        0      0 aaaa:53045              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53044              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53051              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53050              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53049              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53048              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53055              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53054              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53053              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53052              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53059              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53058              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53057              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53056              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53063              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53062              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53061              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53060              192.168.12.3:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53067              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53066              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53065              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53064              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa53071              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53070              192.168.12.13:mysql          TIME_WAIT  root      0
tcp        0      0 aaaa:53069              192.168.12.13:mysql          TIME_WAIT  root      0

发现系统存在大量 TIME_WAIT 状态的连接,通过调整内核参数解决,
vi /etc/sysctl.conf

编辑文件,加入以下内容:
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_fin_timeout = 30
 
然后执行 /sbin/sysctl -p 让参数生效。
 
net.ipv4.tcp_syncookies = 1 表示开启 SYN Cookies。当出现 SYN 等待队列溢出时,启用 cookies 来处理,可防范少量 SYN 攻击,默认为 0,表示关闭;

net.ipv4.tcp_tw_reuse = 1 表示开启重用。允许将 TIME-WAIT sockets 重新用于新的 TCP 连接,默认为 0,表示关闭;

net.ipv4.tcp_tw_recycle = 1 表示开启 TCP 连接中 TIME-WAIT sockets 的快速回收,默认为 0,表示关闭。

net.ipv4.tcp_fin_timeout 修改系統默认的 TIMEOUT 时间
 
修改之后,再用
netstat -ae|grep mysql
tcp        0      0 aaaa:50408              192.168.12.13:mysql          ESTABLISHED nobody    3224651
tcp        0      0 aaaa:50417              192.168.12.13:mysql          ESTABLISHED nobody    3224673
tcp        0      0 aaaa:50419              192.168.12.13:mysql          ESTABLISHED nobody    3224675

发现大量的 TIME_WAIT 已不存在,mysql 进程的占用率很快就降下来的,各网站访问正常!!
以上只是暂时的解决方法,最后仔细巡查发现是前天新上线的一个系统,程序代码中没有使用 mysql.colse(),才导致大量的 mysql  TIME_WAIT。

本文永久更新链接地址:http://www.linuxidc.com/Linux/2017-06/14449.htm

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-22发表,共计3838字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中