ALM-37013 MPPDBServer实例SOCKET异常
告警解释
当操作系统的其它进程占用GTM实例监听端口号或双机端口号时,产生该告警。
告警属性
告警ID |
告警级别 |
是否自动清除 |
---|---|---|
37013 |
重要 |
是 |
告警参数
参数名称 |
参数含义 |
---|---|
Source |
产生告警的集群名称 |
ServiceName |
产生告警的服务名称 |
RoleName |
产生告警的角色名称 |
HostName |
产生告警的主机名 |
Instance |
产生告警的实例 |
对系统的影响
双机端口长时间被占用超过120s后,系统会自处理并恢复可用。但120s内系统不可用。
系统自处理过程
- 如果监听端口或双机端口被占用,则该GTM实例进程无法启动,集群首先会尝试重新启动该进程,该段时间系统不可用。
- 如果在120s内该节点依然无法启动,集群会将GTM备实例升为GTM主实例,系统恢复可用。
可能原因
操作系统的其它进程占用GTM实例监听端口号或双机端口号。
处理步骤
查看告警原因。
- 在FusionInsight Manager界面,选择“运维 > 告警 > 告警”,在实时告警列表中,单击此告警所在行的
。从“定位信息”中查看“HostName”值,获取产生该告警的节点主机名称。
- 查找产生告警的实例的GTM数据目录。
- 使用omm用户登录告警上报的节点。
- 初始化环境变量。
source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile
- 执行gs_om -t status --detail命令,系统反馈类似如下信息。
[ CMServer State ] node node_ip instance state ---------------------------------------------------------------------------- 1 host0 10.0.0.1 1 /opt/huawei/Bigdata/mppdb/cm/cm_server Primary [ Cluster State ] cluster_state : Normal redistributing : No balanced : Yes [ Coordinator State ] node node_ip instance state -------------------------------------------------------------------------- 1 host0 10.0.0.1 5001 /srv/BigData/mppdb/data1/coordinator Normal [ Central Coordinator State ] node node_ip instance state ---------------------------------------------------------------------------- 1 host0 10.0.0.1 5001 /srv/BigData/mppdb/data1/coordinator Normal [ GTM State ] node node_ip instance state ---------------------------------------------------------------------- 1 host0 10.0.0.1 1001 /opt/huawei/Bigdata/mppdb/gtm P Primary [ Datanode State ] node node_ip instance state ----------------------------------------------------------------------------------------- 1 host0 10.0.0.1 6001 /srv/BigData/mppdb/data1/master1 P Primary Normal 1 host0 10.0.0.1 6002 /srv/BigData/mppdb/data2/master2 P Primary Normal 1 host0 10.0.0.1 6003 /srv/BigData/mppdb/data3/master3 P Primary Normal
“/opt/huawei/Bigdata/mppdb/gtm”即为实例GTM的数据目录。
- 假设该实例的GTM数据目录是“/opt/huawei/Bigdata/mppdb/gtm/”,使用以下命令打开“gtm.conf”文件:
vi /opt/huawei/Bigdata/mppdb/gtm/gtm.conf
找到GTM实例的监听端口参数“port”与双机监听端口参数“local_port”。
- 使用以下命令确认该端口是否被其它进程占用,假设该端口号是10000。
netstat -anp | grep 10000
如果GTM实例的监听端口或GTM实例的双机端口被占用,则查看是否是关键进程占用。
- 是,执行5。
- 否,执行7。
- 执行如下命令停止该进程。
kill -9 pid
- 查看告警是否仍然存在。
- 是,执行7。
- 否,处理完毕。
收集故障信息。
- 在FusionInsight Manager界面,单击“运维 > 日志 > 下载”。
- 在“服务”列表框中勾选“MPPDB ”。
- 单击右上角的
设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后1小时,单击“下载”。
- 请联系技术支持,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
无。
- 假设该实例的GTM数据目录是“/opt/huawei/Bigdata/mppdb/gtm/”,使用以下命令打开“gtm.conf”文件:
- 使用omm用户登录告警上报的节点。
「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。