告警解释

当部署在Coordinator节点上的特征向量训练编码服务实例进程异常或者处于“abnormal”状态时，会产生此告警。

告警属性

告警参数

对系统的影响

若发生此告警，说明集群中可以完成长特征到短特征训练的编码训练平台不可用，长特征不能及时转换为短特征，从而不可以使用针对短特征的高效检索服务，这会导致数据库对特征值匹配的检索效率降低。

可能原因

• 训练平台进程未被启动或被其他程序终止。
• 实例安装目录丢失。
• SimsTrainserver实例安装节点Coordinator实例本身存在故障或Coordinator实例不存在。
• 当前数据库状态异常无法提供数据读写能力。

处理步骤

查看告警原因。

• 在FusionInsight Manager界面，选择“运维 > 告警 > 告警”，在告警列表中单击此告警所在行的。从“定位信息”中获取产生该告警的集群名称、节点主机名称以及实例名称。
• 在FusionInsight Manager界面，选择“集群 > 产生告警的集群名称 > 服务 > MPPDB > 实例”，获取SimsTrainserver实例安装节点。
• 以omm用户登录SimsTrainserver实例安装节点，执行命令source环境变量，并用gs_om -t status --detail查看集群状态（假如集群安装目录是“/opt/huawei/Bigdata”。）。

  source /opt/huawei/Bigdata/mppdb/.mppdbgs_profile

  gs_om -t status --detail

• 查询结果如下所示：
  • 若cluster_state状态为“Normal”或“Degrade”，执行5查看Coordinator状态。
  • 若cluster_state状态为“Unavailable”，则表示当前整个集群状态异常，执行9。

    [  CMServer State   ]
    
    node              node_ip       instance                                          state
    -------------------------------------------------------------------------------------------
    1  SZX1000071373  10.90.57.221  1    /opt/huawei/Bigdata/mppdb/cm/cm_server       Primary
    2  SZX1000071374  10.90.57.222  2    /opt/huawei/Bigdata/mppdb/cm/cm_server       Standby
    
    [   Cluster State   ]
    
    cluster_state   : Normal
    redistributing  : No
    balanced        : No

• 观察3命令执行结果中“ [ Coordinator State ]”部分（假如集群数据目录是“/srv/BigData”）：
  • 若显示的Coordinator实例列表中不存在SimsTrainserver实例安装节点，请先参考产品文档“常见紧急故障修复”章节在SimsTrainserver实例安装节点上添加Coordinator实例。再执行6。
  • 若SimsTrainserver实例安装节点的Coordinator实例状态不为“Normal”，请先参考产品文档“常见紧急故障修复”章节修复Coordinator实例。再执行6。
  • 若SimsTrainserver实例安装节点的Coordinator实例状态为“Normal”，执行6。

  [ Coordinator State ]
  
  node               node_ip         instance                                  state
  ---------------------------------------------------------------------------------------
  1  SZX1000071373 10.90.57.221 1 /srv/BigData/mppdb/data1/coordinator Normal
  2  SZX1000071374 10.90.57.222 2 /srv/BigData/mppdb/data1/coordinator Normal
  3  SZX1000071375 10.90.57.223 3 /srv/BigData/mppdb/data1/coordinator Normal

• 进入MPPDB的安装目录下，找到“simSearch/TrainServer/bin”目录。进入“simSearch/TrainServer/bin”目录下面执行sh monitor_trainServer.sh status命令：
  • 若显示“[monitor_trainServer.sh] process status normal”，处理完毕。
  • 若显示“[monitor_trainServer.sh] process status abnormal”，执行7。

• 执行脚本start_trainServer.sh，再进入MPPDB的安装目录下，找到“simSearch/TrainServer/bin”目录。进入“simSearch/TrainServer/bin”目录下面执行sh monitor_trainServer.sh status命令：
  • 若显示“[monitor_trainServer.sh] process status normal”，执行8。
  • 若显示“[monitor_trainServer.sh] process status abnormal”，执行9。

• 等待3分钟，查看告警是否仍然存在。
  • 是，执行9。
  • 否，处理完毕。