5. 单个Ceph节点宕机处理


在某些情况下,如服务器硬件故障,造成单台 Ceph 节点宕机无法启动,可以按照本节所示流程将该节点上的 OSD 移除集群,从而达到 Ceph 集群的恢复。

5.1 单台 Ceph 节点宕机处理步骤

  1. 登陆 ceph monitor 节点,查询 ceph 状态:

    ceph health detail

  2. 将故障节点上的所有 osd 设置成 out,该步骤会触发数据 recovery, 需要等待数据迁移完成, 同时观察虚拟机是否正常:

    ceph osd out osd_id

  3. 从 crushmap 将 osd 移除,该步骤会触发数据 reblance,等待数据迁移完成,同时观察虚拟机是否正常:

    ceph osd crush remove osd_name

  4. 删除 osd 的认证: ceph auth del osd_name

  5. 删除 osd :ceph osd rm osd_id

5.2 恢复后检查步骤

  1. 检查 ceph 集群状态正常;
  2. 检查虚拟机状态正常;
  3. 楚天云人员检查虚拟机业务是否正常;
  4. 检查平台服务正常:nova、cinder、glance;
  5. 创建新卷正常;
  6. 创建虚拟机正常。