MySQL启动错误排查

179次阅读

没有评论

共计 2073 个字符，预计需要花费 6 分钟才能阅读完成。

一般情况下 MySQL 的启动错误还是很容易排查的，但是今天我们就来说一下不一般的情况。拿到一台服务器，安装完 mysql 后进行启动，启动错误如下：

MySQL 启动错误排查

有同学会说，哥们儿你是不是 buffer pool 设置太大了，设置了 96G 内存。这明显提示无法分配内存嘛。如果真是这样也就不在这里进行分享了，哈哈。

我的服务器内存是 128G。如下图：

MySQL 启动错误排查

服务器内存使用情况：

MySQL 启动错误排查

那么问题来了，既然还剩如此多的内存，为什么提示无法分配内存？？。各位童鞋怎么看？

1. 首先想到会不会是有几条内存坏了？于是运维的同学进行了检查，给我的反馈是硬件一切正常。

2. 把 mysql 配置参数又检查了一遍，没有发现什么问题，线上一直就是使用这些参数。

3. 又把文件拷贝到另外一台机器，，另外一台服务器可以正常启动（2 台机器硬件配置一致）。

那么如果排除硬件问题，mysql 配置问题，那么剩下的就只有操作系统的内核参数配置了。于是把两台服务器进行了对比，最终发现了一个内核参数不一致。

vm.overcommit_memory

mysql 启动正常的服务器改参数的值是 0，而 mysql 启动错误的这台服务器该值是 2。
MySQL 启动错误排查

那么问题来了，这个参数到底是什么鬼？竟然会让 mysql 分配内存失败，最后导致无法启动。经过查询资料知道了 vm.overcommit_memory 是什么鬼。

vm.overcommit_memory

默认值为：0
从内核文档里得知，该参数有三个值，分别是：
0：当用户空间请求更多的的内存时，内核尝试估算出剩余可用的内存。
1：当设这个参数值为 1 时，内核允许超量使用内存直到用完为止，主要用于科学计算.
2：当设这个参数值为 2 时，内核会使用一个决不过量使用内存的算法，即系统整个内存地址空间不能超过 swap+50% 的 RAM 值，50% 参数的设定是在 overcommit_ratio 中设定。

vm.overcommit_ratio
默认值为：50

MySQL 启动错误排查
这个参数值只有在 vm.overcommit_memory= 2 的情况下，这个参数才会生效。

那么我们来看一下总的内存地址不能超过多少。其实是可以直接查看的。

[root@yayundeng 3306]# cat /proc/meminfo |grep -i commit
CommitLimit:    70144396 kB
Committed_AS:     135196 kB
[root@yayundeng 3306]#

通过查看可以得知在 70G 的样子。那么这个是如何计算的呢？这个就是上面提到的一个公式。swap+50% 的 RAM 值，50% 参数的设定是在 overcommit_ratio 中设定。

总虚拟内存 = 可用物理内存 × 百分比 + 交换分区

[root@yayundeng 3306]# cat /proc/meminfo | grep MemTotal
MemTotal:       132096808 kB
[root@yayundeng 3306]#

[root@yayundeng 3306]# free -k
             total       used       free     shared    buffers     cached
Mem:     132096808    1583944  130512864          0      10240     133220
-/+ buffers/cache:    1440484  130656324
Swap:      4095992          0    4095992

[root@yayundeng 3306]# cat /proc/sys/vm/overcommit_ratio 
50
[root@yayundeng 3306]#

总虚拟内存 =132096808 * 50% + 4095992= 70144396 kB

那么最后的结果就是 buffer pool 不能超过 70144396 kB – 135196 kB=70009200 KB=66G。实际上经过测试，buffer pool 只能设置 57G。
MySQL 启动错误排查

最后在看看总虚拟内存情况：

CommitLimit：最大可用虚拟内存

Committed_AS：已使用虚拟内存

[root@yayundeng 3306]# cat /proc/meminfo |grep -i commit
CommitLimit:    70144396 kB
Committed_AS:   65539208 kB

那么如果把内核参数 vm.overcommit_memory 恢复为默认值 0，那么将不会受到约束。

echo 0 > /proc/sys/vm/overcommit_memory

MySQL 启动错误排查

参考资料：

http://serverfault.com/questions/606185/how-does-vm-overcommit-memory-work
http://linuxperf.com/?p=102

总结：

说了这么多，那么为什么要修改内核参数 vm.overcommit_memory 的值呢？这个是因为这台服务器之前跑过 GreenPlum 数据库，拿到我手上的时候没有进行重装系统，那么还是建议如果拿到的机器之前跑过其他的业务，那么保险的方法还是重装一下系统，然后再部署自己的业务，不然真的会出现莫名其妙的问题。

本文永久更新链接地址 ：http://www.linuxidc.com/Linux/2016-12/138157.htm

正文完

星哥玩云-微信公众号