所选语种没有对应资源,请选择:

本站点使用Cookies,继续浏览表示您同意我们使用Cookies。Cookies和隐私政策>

提示

尊敬的用户,您的IE浏览器版本过低,为获取更好的浏览体验,请升级您的IE浏览器。

升级

FusionCloud 6.3.1 故障处理 06

评分并提供意见反馈 :
华为采用机器翻译与人工审校相结合的方式将此文档翻译成不同语言,希望能帮助您更容易理解此文档的内容。 请注意:即使是最好的机器翻译,其准确度也不及专业翻译人员的水平。 华为对于翻译的准确性不承担任何责任,并建议您参考英文文档(已提供链接)。
etcd集群故障

etcd集群故障

现象描述

  • etcd集群实例不可用。
  • etcd实例所在节点不可用。

可能原因

  • 节点故障导致etcd实例不可用。
  • etcd集群负载过高导致实例异常退出。

处理方法

  1. 使用PuTTY,登录om_core1_ip节点。

    默认帐号:paas,默认密码:QAZ2wsx@123!

  2. 执行以下命令检查etcd实例是否均处于Running状态。

    kubectl -n manage get pod|grep etcd|grep -v cse

    etcd-0                   1/1       Running             0    1d
    etcd-1                   1/1       Running             0    1d
    etcd-2                   1/1       Error               0    1d

    如上所示,etcd-2处于异常状态。

  3. 判断异常etcd-2实例所在节点是否正常。

    1. 执行以下命令获取名称。

      kubectl -n manage get pod etcd-2 -o wide

      NAME      READY     STATUS   RESTARTS   AGE       IP               NODE   
      etcd-2    0/4       Error    0          40m       10.109.176.180   manage-cluster1-87c05eac-9dmpc

      如上所示,节点是manage-cluster1-87c05eac-9dmpc

      说明:

      查询获取相应节点IP地址的命令:kubectl -n manage get node manage-cluster1-87c05eac-9dmpc -ojson |grep address ,回显如下:

              "address": "10.109.176.180",
              "addresses": [
                      "address": "10.109.176.180",
                      "address": "10.109.176.180",
                      "address": "manage-cluster1-87c05eac-9dmpc",
    2. 执行以下命令检查节点是否正常。

      kubectl -n manage get node | grep manage-cluster1-87c05eac-9dmpc

      • 若显示如下,表明节点正常,etcd实例会自动恢复,用户无需做任何操作。
        manage-cluster1-87c05eac-9dmpc Ready 2d
      • 若显示如下,表明节点异常,执行步骤 4
        manage-cluster1-87c05eac-9dmpc NotReady   2d
        说明:

        对于一个拥有N个实例的etcd集群,平台最多允许故障的节点个数是(N-1)/2,若节点故障数超过该值,etcd集群不可用。

  4. 执行以下命令,手动删除异常的etcd实例,然后平台会自动恢复异常的etcd实例。

    kubectl -n manage delete pod etcd-2

    执行如下命令,检查etcd实例是否恢复

    kubectl -n manage get pod|grep etcd|grep -v cse

    若返回结果为下图所示,则表示etcd实例恢复完成。

翻译
下载文档
更新时间:2019-08-19

文档编号:EDOC1100043088

浏览量:18194

下载量:438

平均得分:
本文档适用于这些产品
相关版本
相关文档
Share
上一页 下一页