云数据库 GaussDB停止组件失败怎么解决?

123 阅读3分钟

告警解释

=======

停止数据库实例节点的组件失败,产生告警。

对系统的影响

停止数据库实例节点的组件失败。

可能原因

  • 关闭实例的HA监控失败。
  • 网络错误。

处理步骤

  1. 通过告警信息获取实例ID或工作ID。

  2. 登录DBS运维管理平台

  3. 选择“实例运维 > 任务管理”,右上角筛选条件选择“实例ID”或“任务流ID”,输入框中输入上一步获取的实例ID或工作ID,执行搜索。

    “失败原因”列输出了失败时的程序错误日志。

  4. 单击“树表”,则可以查看任务失败具体的环节。

  5. 根据4中任务执行结果,定位不同的故障场景操作。

    • 如果是CloseHa4NodeTask失败,则可能是HA服务异常,请确保HA服务正常后,参考重做Task,从CloseHa4NodeTask重做即可。
    • 如果是AsyncComponentControlTask任务失败,则可能是服务到实例间网络异常,请继续执行以下步骤。
  6. 检查GaussDB Service是否可通过SSH连接到实例。

    1. 参考查看管理节点IP信息查询GaussDB实例管理节点IP。

    2. 登录DBS运维管理平台,选择“实例运维 > 实例管理 > 实例列表”, 输入实例ID,执行搜索。

    3. 单击6.b中查询的实例名称,进入实例详情,在实例详情中查找“管理虚拟ip”,即GaussDB实例的管理VIP。

    4. 参考登录数据库管理节点,以opsadmin用户名登录6.a查询到的管理节点,执行ping命令,确认6.c中GaussDB实例的管理VIP的网络是否正常。

      • 如果无法ping通,说明GaussDB Service到实例网络不通,请联系网络管理员首先排查网络故障,网络故障排除后重试重启操作。

      • 如果可ping通,说明GaussDB Service到实例网络可以联通。在树表里面AsyncControlComponentStopJob右上角,单击“操作”下拉箭头的“重做”,选择AsyncComponentControlTask进行任务重试,如果停止操作仍然失败,请执行7

  7. 参考下载管理节点日志收集日志,并收集告警信息,联系技术支持进行处理。

    需要下载的日志信息有:

    管理侧:

    • DBS-GaussDB-backupmanager组件下的日志。
    • DBS-GaussDB-instancemanager组件下的日志。

    租户侧:

    Agent组件下的:

    • /home/Ruby/log/agent.log
    • /home/Ruby/log/asyncJobResult.dat

    GaussDB Kernel组件下的:/var/lib/log/Ruby

告警清除

可通过重试停止组件任务流,任务流成功后,该告警消除。

如果不再需要停止组件,并且节点上不存在已停止的组件,需要检查节点的HA是否开启,如果关闭需要手动开启。

参考信息

不涉及。

更多详情请参考GaussDB 文档中心:doc.hcs.huawei.com/db/zh-cn/ga…