Ceph集群报 Monitor clock skew detected 错误问题排查及解决

共计 2124 个字符，预计需要花费 6 分钟才能阅读完成。

Ceph 集群报 Monitor clock skew detected 错误告警信息如下：
[root@ceph-100-80 ceph]# ceph -w
    cluster ddc1b10b-6d1a-4ef9-8a01-d561512f3c1d
      health HEALTH_WARN
            clock skew detected on mon.ceph-100-81, mon.ceph-100-82
            Monitor clock skew detected
      monmap e1: 3 mons at {ceph-100-80=172.16.100.80:6789/0,ceph-100-81=172.16.100.81:6789/0,ceph-100-82=172.16.100.82:6789/0}
            election epoch 22, quorum 0,1,2 ceph-100-80,ceph-100-81,ceph-100-82
      mdsmap e21: 1/1/1 up {0=ceph-100-80=up:active}, 2 up:standby
      osdmap e116: 6 osds: 6 up, 6 in
      pgmap v205: 576 pgs, 3 pools, 1962 bytes data, 20 objects
            234 MB used, 269 GB / 269 GB avail
                  576 active+clean
   
 1: 添加配置参数：
vim /etc/ceph/ceph.conf

 [mon.ceph-100-80]
 host = ceph-100-80
 mon_data = /var/lib/ceph/mon/ceph-ceph-100-80/
 mon_addr = 172.16.100.80:6789

 # 添加内容如下：
mon clock drift allowed = 2
 mon clock drift warn backoff = 30   

 2: 同步配置文件
ceph-deploy –overwrite-conf admin ceph-100-{80..82}

 3: 重启 mon 服务

/etc/init.d/ceph restart mon

 4: 验证：
[root@ceph-100-80 ceph]# ceph -w       
    cluster ddc1b10b-6d1a-4ef9-8a01-d561512f3c1d
      health HEALTH_OK
      monmap e1: 3 mons at {ceph-100-80=172.16.100.80:6789/0,ceph-100-81=172.16.100.81:6789/0,ceph-100-82=172.16.100.82:6789/0}
            election epoch 24, quorum 0,1,2 ceph-100-80,ceph-100-81,ceph-100-82
      mdsmap e21: 1/1/1 up {0=ceph-100-80=up:active}, 2 up:standby
      osdmap e116: 6 osds: 6 up, 6 in
      pgmap v205: 576 pgs, 3 pools, 1962 bytes data, 20 objects
            234 MB used, 269 GB / 269 GB avail
                  576 active+clean
             
再次查看，告警内容消失。
问题总结：
本问题主要是 mon 节点服务器，时间偏差比较大导致，本次遇到问题为测试环境，通过修改 ceph 对时间偏差阀值，规避的告警信息，线上业务环境，注意排查服务器时间同步问题。

在 CentOS 7.1 上安装分布式存储系统 Ceph  http://www.linuxidc.com/Linux/2015-08/120990.htm

Ceph 环境配置文档 PDF http://www.linuxidc.com/Linux/2013-05/85212.htm 

CentOS7 下部署 Ceph 集群（版本 10.2.2）http://www.linuxidc.com/Linux/2017-02/140728.htm

Ceph 的安装过程 http://www.linuxidc.com/Linux/2013-05/85210.htm 

如何升级 Ceph 版本及注意事项  http://www.linuxidc.com/Linux/2017-02/140631.htm

HOWTO Install Ceph On FC12, FC 上安装 Ceph 分布式文件系统 http://www.linuxidc.com/Linux/2013-05/85209.htm 

实验环境 Ceph 9.2.1 部署笔记 http://www.linuxidc.com/Linux/2016-11/137094.htm

Ubuntu 16.04 快速安装 Ceph 集群  http://www.linuxidc.com/Linux/2016-09/135261.htm

Ceph 的详细介绍 ：请点这里
Ceph 的下载地址 ：请点这里

本文永久更新链接地址 ：http://www.linuxidc.com/Linux/2017-03/141309.htm