告警解释

告警属性

告警参数

对系统的影响

当Coordinator实例启动失败时，集群将提示启动失败，数据库系统将无法使用DDL语句，DML可以正常使用。

一段时间后（约10分钟），系统会自动将故障Coordinator剔除，此时用gs_om -t status --detail命令查询到故障Coordinator节点状态为Deleted。此时可以正常使用DDL语句，和DML语句。

此时不要直接重启MPPDB服务。请按照处理步骤中描述操作。

可能原因

• Coordinator所在机器发生硬件故障（断电、硬盘损坏等）。
• Coordinator实例数据目录中的“postgresql.conf”配置文件不存在或者其中某个配置参数不正确。
• Coordinator实例线程无法监听IP，或者无法绑定监听端口。
• Coordinator实例进程没有其数据目录读写权限、或数据目录丢失。
• 绑定Coordinator实例的虚拟IP异常。

处理步骤

• 如果该告警产生时间前后，有设备分区丢失的告警，请参考产品文档“硬盘故障处理”章节完成修复。
• 告警产生后等待5分钟。在FusionInsight Manager界面，选择“运维 > 告警 > 告警”，在实时告警列表中，查看告警是否仍然存在。
  • 是，执行3。
  • 否，处理完毕。

• 在告警列表中单击此告警所在行的。从“定位信息”中获取产生该告警的集群名称、节点主机名称以及实例名称。
• 选择“集群 > 产生告警的集群名称 > 服务 > MPPDB > 配置 > 基础配置” ，查看“mppdb.cms.active.ip”的值以获取主CMS节点IP。
• 以omm用户身份登录主CMS节点，执行source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile命令启动环境变量。执行以下命令查询并确认故障节点Coordinator状态是否为Deleted。

  gs_om -t status --detail

  • 是，执行6。
  • 否，执行12。

• 在FusionInsight Manager界面，选择“集群 > 产生告警的集群名称 > 服务 > MPPDB”。单击“实例”，在实例列表中单击故障节点对应的MPPDBServer。
• 选择“实例配置 > 全部配置”，在搜索框中输入参数名称“mppdb.coo.number”进行搜索。
• 将“mppdb.coo.number”的值设置为0，单击“保存”。
• 在弹出窗口中，单击“确定”。界面提示“操作成功”，单击“完成”，查看操作是否成功执行。
  • 是，故障Coordinator删除完毕，手动在界面清除Coordinator进程异常告警。
  • 否，执行12。

• 参见产品文档的“故障管理”章节修复故障节点。
  故障节点是否修复成功：

  • 是，执行11。
  • 否，参见产品文档的“更换GaussDB 200节点”章节更换新的节点，处理完毕。

• 将修复后的故障节点的Coordinator加回。
  • 重复步骤6~7，将“mppdb.coo.number”的值设置为1，单击“保存”。
  • 在弹出窗口中，单击“确定”。界面提示“操作成功”，单击“完成”，查看操作是否成功执行。
    • 是，Coordinator增加完毕。处理完毕。
    • 否，执行12。

• 在FusionInsight Manager界面，选择“运维 > 日志 > 下载”。
• 在“服务”列表框中勾选“MPPDB ”。
• 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后1小时，单击“下载”。
• 请联系技术支持，并发送已收集的故障日志信息。

告警清除

此告警修复后，系统不会自动清除此告警，需手工清除。

参考信息

无。