告警解释
=======
停止数据库实例节点的组件失败,产生告警。
对系统的影响
停止数据库实例节点的组件失败。
可能原因
- 关闭实例的HA监控失败。
- 网络错误。
处理步骤
-
通过告警信息获取实例ID或工作ID。
-
选择“实例运维 > 任务管理”,右上角筛选条件选择“实例ID”或“任务流ID”,输入框中输入上一步获取的实例ID或工作ID,执行搜索。
“失败原因”列输出了失败时的程序错误日志。
-
单击“树表”,则可以查看任务失败具体的环节。
-
根据4中任务执行结果,定位不同的故障场景操作。
- 如果是CloseHa4NodeTask失败,则可能是HA服务异常,请确保HA服务正常后,参考重做Task,从CloseHa4NodeTask重做即可。
- 如果是AsyncComponentControlTask任务失败,则可能是服务到实例间网络异常,请继续执行以下步骤。
-
检查GaussDB Service是否可通过SSH连接到实例。
-
参考查看管理节点IP信息查询GaussDB实例管理节点IP。
-
登录DBS运维管理平台,选择“实例运维 > 实例管理 > 实例列表”, 输入实例ID,执行搜索。
-
单击6.b中查询的实例名称,进入实例详情,在实例详情中查找“管理虚拟ip”,即GaussDB实例的管理VIP。
-
参考登录数据库管理节点,以opsadmin用户名登录6.a查询到的管理节点,执行ping命令,确认6.c中GaussDB实例的管理VIP的网络是否正常。
-
如果无法ping通,说明GaussDB Service到实例网络不通,请联系网络管理员首先排查网络故障,网络故障排除后重试重启操作。
-
如果可ping通,说明GaussDB Service到实例网络可以联通。在树表里面AsyncControlComponentStopJob右上角,单击“操作”下拉箭头的“重做”,选择AsyncComponentControlTask进行任务重试,如果停止操作仍然失败,请执行7。
-
-
-
参考下载管理节点日志和收集日志,并收集告警信息,联系技术支持进行处理。
需要下载的日志信息有:
管理侧:
- DBS-GaussDB-backupmanager组件下的日志。
- DBS-GaussDB-instancemanager组件下的日志。
租户侧:
Agent组件下的:
- /home/Ruby/log/agent.log
- /home/Ruby/log/asyncJobResult.dat
GaussDB Kernel组件下的:/var/lib/log/Ruby
告警清除
可通过重试停止组件任务流,任务流成功后,该告警消除。
如果不再需要停止组件,并且节点上不存在已停止的组件,需要检查节点的HA是否开启,如果关闭需要手动开启。
参考信息
不涉及。
更多详情请参考GaussDB 文档中心:doc.hcs.huawei.com/db/zh-cn/ga…