ALM-37004 Datanode主备不同步或者断连
告警解释
当Datanode主实例与Datanode备实例连接异常时,产生该告警。
告警属性
告警ID |
告警级别 |
是否自动清除 |
---|---|---|
37004 |
重要 |
是 |
告警参数
参数名称 |
参数含义 |
---|---|
Source |
产生告警的集群名称 |
ServiceName |
产生告警的服务名称 |
RoleName |
产生告警的角色名称 |
HostName |
产生告警的主机名 |
Instance |
产生告警的实例 |
对系统的影响
Datanode主实例的Redo日志将自动发送到对应的Datanode从备实例,会增加该Datanode从备实例所在物理节点上的网络压力。
系统自处理过程
当Datanode主实例与对应的Datanode备实例连接异常时,Datanode主实例的Redo日志将自动发送到对应的Datanode从备实例,不影响业务的运行。
可能原因
Datanode主实例与对应的Datanode备实例连接异常。
处理步骤
查看告警原因。
- 在FusionInsight Manager界面,选择“运维 > 告警 > 告警”,在实时告警列表中,单击此告警所在行的
。从“定位信息”中查看“HostName”值,获取产生该告警的节点主机名称。
- 使用omm用户登录告警上报的节点,执行如下命令查看集群Datanode主备实例是否故障。
source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile
gs_om -t status --detail
- 是,先修复故障实例,具体方法请参考产品文档“修复MPPDBServer实例”章节。再执行3。
- 否,执行3。
- 查看集群Datanode主备实例所在机器网络是否正常,比如Datanode主实例所在机器或者备实例所在机器使用的网卡为eth0,使用下面命令查看网络是否正常。
/sbin/ifconfig eth0
- 如果网卡正常,执行4。
- 如果显示网卡不正常,请及时联系硬件工程师修复网卡,再执行4。
- 查看告警是否仍然存在。
- 是,执行5。
- 否,处理完毕。
收集故障信息。
- 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
- 在“服务”列表框中勾选“MPPDB ”。
- 单击右上角的
设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后1小时,单击“下载”。
- 请联系技术支持,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
无。
「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。