所选语种没有对应资源,请选择:

本站点使用Cookies,继续浏览表示您同意我们使用Cookies。Cookies和隐私政策>

提示

尊敬的用户,您的IE浏览器版本过低,为获取更好的浏览体验,请升级您的IE浏览器。

升级

FusionCloud 6.3.1 故障处理 06

评分并提供意见反馈 :
华为采用机器翻译与人工审校相结合的方式将此文档翻译成不同语言,希望能帮助您更容易理解此文档的内容。 请注意:即使是最好的机器翻译,其准确度也不及专业翻译人员的水平。 华为对于翻译的准确性不承担任何责任,并建议您参考英文文档(已提供链接)。
容器存在残留Canal组件无法启动导致节点异常

容器存在残留Canal组件无法启动导致节点异常

现象描述

当发现平台出现多个服务功能不可用,则可能为节点异常引起的组件功能异常,应对节点状态进行排查。

可能原因

Canal组件启停过程中容器的service endpoint没能正常清除,导致新的容器无法正常启动。

处理方法

  1. 使用PuTTY,登录om_core1_ip节点。

    默认帐号:paas,默认密码:QAZ2wsx@123!

  2. 执行以下命令查询node状态。

    kubectl get nodes --all-namespaces

  3. 如发现某节点处于NotReady状态,则执行以下命令获取异常节点IP。

    kubectl get nodes NODENAME -o yaml -n NAMESPACE|grep address

    其中,NODENAME为异常节点的名称;NAMESPACE为异常节点的namespace。

      addresses:
      - address: 10.120.193.1
      - address: 10.120.193.1
      - address: paas-10-120-193-1

    如上所示,节点IP为10.120.193.1。

  4. 判断异常是否由组件容器service endpoint残留问题引起。

    以paas用户登录目标节点,执行以下命令。

    monit summary

    确认进程列表中canal一项是否处于Running状态。

     docker   Running         Process
     canal    Not monitored  Process

    如canal组件处于非Running的状态,则执行以下命令,查看日志信息。确认是否存在形如“ervice endpoint with name canal_agent already exists”的报错信息。

    journalctl -n

    level=error msg="Handler for POST /v1.23/containers/77ff5b738be9ce0bee8f53d4745b972ba64589c9785107038b879dc1261b8355/start returned error: service endpoint with name canal_agent already exists" canal    

    如存在,确认为service endpoint残留引起异常。

  5. 执行以下命令,让monit停止尝试启动canal进程。

    monit stop canal

  6. 执行以下命令,查询残留容器的ID。

    sudo docker ps -a|grep canal

    31b1731582ec        canal-agent:latest                                          "/agent -LogOutput /v"   9 minutes ago       Up 9 minutes                           canal_agent

    容器id为:31b1731582ec。

  7. 执行以下命令,删除残留容器。

    sudo docker rm CONTAINERID

    其中,CONTAINERID步骤 6中获取的容器ID。

  8. 执行以下命令,清除残留的service信息。

    sudo docker network disconnect -f host canal_agent

  9. 执行以下命令,启动进程。

    monit start all

翻译
下载文档
更新时间:2019-08-19

文档编号:EDOC1100043088

浏览量:18005

下载量:438

平均得分:
本文档适用于这些产品
相关文档
相关版本
Share
上一页 下一页