暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

华为GaussDB A ALM-37013 MPPDBServer实例SOCKET异常

墨天轮 2019-10-12
872

ALM-37013 MPPDBServer实例SOCKET异常

告警解释

当操作系统的其它进程占用GTM实例监听端口号或双机端口号时,产生该告警。

告警属性

告警ID

告警级别

是否自动清除

37013

重要

告警参数

参数名称

参数含义

Source

产生告警的集群名称

ServiceName

产生告警的服务名称

RoleName

产生告警的角色名称

HostName

产生告警的主机名

Instance

产生告警的实例

对系统的影响

双机端口长时间被占用超过120s后,系统会自处理并恢复可用。但120s内系统不可用。

系统自处理过程

  • 如果监听端口或双机端口被占用,则该GTM实例进程无法启动,集群首先会尝试重新启动该进程,该段时间系统不可用。
  • 如果在120s内该节点依然无法启动,集群会将GTM备实例升为GTM主实例,系统恢复可用。

可能原因

操作系统的其它进程占用GTM实例监听端口号或双机端口号。

处理步骤

查看告警原因。

  • 在FusionInsight Manager界面,选择“运维 > 告警 > 告警”,在实时告警列表中,单击此告警所在行的。从“定位信息”中查看“HostName”值,获取产生该告警的节点主机名称。
  • 查找产生告警的实例的GTM数据目录。

    • 使用omm用户登录告警上报的节点。

    • 初始化环境变量。

      source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile

    • 执行gs_om -t status --detail命令,系统反馈类似如下信息。
      [ CMServer State ] node node_ip instance state ---------------------------------------------------------------------------- 1 host0 10.0.0.1 1 /opt/huawei/Bigdata/mppdb/cm/cm_server Primary [ Cluster State ] cluster_state : Normal redistributing : No balanced : Yes [ Coordinator State ] node node_ip instance state -------------------------------------------------------------------------- 1 host0 10.0.0.1 5001 /srv/BigData/mppdb/data1/coordinator Normal [ Central Coordinator State ] node node_ip instance state ---------------------------------------------------------------------------- 1 host0 10.0.0.1 5001 /srv/BigData/mppdb/data1/coordinator Normal [ GTM State ] node node_ip instance state ---------------------------------------------------------------------- 1 host0 10.0.0.1 1001 /opt/huawei/Bigdata/mppdb/gtm P Primary [ Datanode State ] node node_ip instance state ----------------------------------------------------------------------------------------- 1 host0 10.0.0.1 6001 /srv/BigData/mppdb/data1/master1 P Primary Normal 1 host0 10.0.0.1 6002 /srv/BigData/mppdb/data2/master2 P Primary Normal 1 host0 10.0.0.1 6003 /srv/BigData/mppdb/data3/master3 P Primary Normal

    /opt/huawei/Bigdata/mppdb/gtm”即为实例GTM的数据目录。

  • 假设该实例的GTM数据目录是“/opt/huawei/Bigdata/mppdb/gtm/”,使用以下命令打开“gtm.conf”文件:

    vi /opt/huawei/Bigdata/mppdb/gtm/gtm.conf

    找到GTM实例的监听端口参数“port”与双机监听端口参数“local_port”

  • 使用以下命令确认该端口是否被其它进程占用,假设该端口号是10000。

    netstat -anp | grep 10000

    如果GTM实例的监听端口或GTM实例的双机端口被占用,则查看是否是关键进程占用。

    • 是,执行5。
    • 否,执行7。

  • 执行如下命令停止该进程。

    kill -9 pid

  • 查看告警是否仍然存在。

    • 是,执行7。
    • 否,处理完毕。

收集故障信息。

  • 在FusionInsight Manager界面,单击运维 > 日志 > 下载
  • “服务”列表框中勾选“MPPDB ”
  • 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后1小时,单击“下载”
  • 请联系技术支持,并发送已收集的故障日志信息。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

无。

「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论