如何避免云数据库 GaussDB容灾演练开始失败?

39 阅读3分钟

告警解释

=======

云数据库 GaussDB 搭建流容灾关系后,对灾备下发容灾演练开始任务失败,产生告警。

对系统的影响

容灾关系异常,容灾功能无法使用。

可能原因

实例异常或者容灾状态异常。

处理步骤

  1. 使用浏览器,通过地址“https://

    ManageOne运维面主页的访问地址

    :31943”,登录ManageOne运维面,或通过地址“https://

    ManageOne主门户的访问地址

    ”,登录ManageOne主门户,选择“运维中心(OC)”,进入ManageOne运维面。

    • 密码方式:输入账号和密码。
      • 默认账号:bss_admin

        对于从8.2.0或更早版本升级上来的ManageOne,默认账号为admin。

      • 默认密码:参见《华为云Stack 8.3.1 账户一览表》的“A类(Portal)”页签中,“ManageOne运维面”账户对应的默认密码。

    • USB Key方式:插入已预置用户证书的USB Key,选择设备和用户证书,并输入PIN码。
  2. 在“告警 > 告警管理 > 当前告警”中查看告警信息,获取告警中的实例ID或者工作ID。

  3. 单击上方菜单栏的“首页”,返回首页。

  4. 在ManageOne运维面右下角“常用链接”栏中单击“ServiceCM”,跳转到ServiceCM插件列表界面。

  5. 在ServiceCM插件列表界面,单击“自助开发平台 > dbs-ops”,进入DBS运维管理平台。

  6. 选择“实例运维 > 任务管理”,右上角筛选条件选择“实例ID”或“任务流ID”,输入框中输入告警定位信息中的实例ID或工作ID,执行搜索。

    “失败原因”列输出了失败时的程序错误日志。单击“树表”,则可以查看任务失败具体的环节。

  7. 根据6中失败的Task,进行不同的操作。

    如果“WaitStreamDisasterRecoverSimulationTask”任务失败,可能导致当前实例下发演练操作失败,参考如下操作修复:

    1. 登录实例节点

    2. 执行如下命令,导入环境变量。

      source /home/Ruby/gauss_env_file

    3. 检查集群状态执行如下指令,检查集群状态。

      cm_ctl query -Cvid

    4. 如果灾备集群状态异常,登录DBS运维管理平台,找到对应实例,记录实例ID。

    5. 进入“实例运维 > 实例管理 > 通用表操作”页面,根据实例ID搜索实例Action。

    6. 单击“切换状态”,单击“确认”切换实例Action状态。

    7. 根据异常组件类型,参考告警 ALM-5012947 云数据库 GaussDB ETCD服务异常ALM-5012951 云数据库 GaussDB DN服务异常进行修复。

    8. 待灾备集群修复完成后,再次切换实例Action。

    9. 在“树表”页面,单击执行失败的Task所在的Job右侧的“操作”下拉框,选择任务“StreamDisasterRecoverSimulationTask”进行重试。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

不涉及。

更多详情请参考GaussDB 文档中心:doc.hcs.huawei.com/db/zh-cn/ga…