告警解释

当集群某节点因为磁盘、内存、CPU、网络等因素造成节点内Coordinator/Datanode实例在设定周期内被等待次数超过设定阈值，并且整个节点中实例被等待次数占整个集群的比例超过设定阈值时，产生该告警。

告警属性

告警参数

对系统的影响

当发生此告警时，表明有节点运行速度慢，正在成为性能瓶颈。

可能原因

• 节点磁盘故障。
• 节点内存不足。
• 节点CPU使用率过高。
• 节点网络故障。

处理步骤

• 在FusionInsight Manager界面，选择“运维 > 告警 > 告警”，在实时告警列表中，单击此告警所在行的。从“定位信息”中查看“HostName”值，获取产生该告警的节点主机名称。
• 使用omm用户登录产生告警的节点。

• 初始化环境变量。

  source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile

• 执行以下命令一键隔离慢节点。

  其中HOSTNAME为1查出的主机名， [-l LOGFILE] 表示日志路径，可选。

  gs_om -t isolate_stop -h HOSTNAME [-l LOGFILE]

• 联系华为工程师检查慢节点的磁盘、内存、CPU、网络等条件，修复节点环境。
• 执行以下命令进行一键恢复慢节点。

  其中HOSTNAME为1查出的主机名， [-l LOGFILE] 表示日志路径，可选。

  gs_om -t isolate_restore -h HOSTNAME [-l LOGFILE]

• 查看告警是否仍然存在。
  • 是，执行8。
  • 否，处理完毕。

  收集故障信息

• 在FusionInsight Manager界面，选择“系统设置 > 日志下载”。
• 在“服务”下拉框中勾选“MPPDB”，单击“确定”。
• 设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后1小时，单击“下载”。
• 请联系技术支持，并发送已收集的故障日志信息。

告警清除

此告警修复后，系统会自动清除此告警，无需手工清除。

参考信息

无。