【常见场景】目前识别到的系统磁盘使用率超阈值告警触发场景主要有如下几种:
1 版本升级,占用系统磁盘资源增加;
2 临时文件没有及时清理,不断累积;
3 管控或操作系统相关的日志没有及时回收;
【基本处理方法】
步骤1:收到告警后,确认上报告警的实例是不是有变更类操作,如升级、扩容等操作。与操作人员确认影响。
步骤2:如果没有变更类操作,确认触发告警的节点及节点类型(CN/DN/GTM/CMS);
步骤3:登陆对应节点,使用df
–h命令查看当前磁盘使用率较高的磁盘,确认当前使用率,可能存在风险的目录包括/home/Ruby/log、/home/Ruby、/home/Mike、$PGHOST、/user/local(DN节点);
步骤4:其中/home/Ruby/log下主要存放系统日志,管控日志以及om_agent日志,正常情况下这些日志均有自动清理和回收机制,若发现某类日志数量明显增加,则可能存在风险,需要手动清理(例如om_agent默认保留10个日志文件、管控日志默认保留20个等);
步骤5:/home/Ruby和/home/Mike目录下主要会存放一些运维操作的临时文件,这些文件一般情况下在运维操作结束后就可以清理,可能存在忘记清理或者临时文件生成过大的情况,需要及时处理;
步骤6:$PGHSOT目录下主要存放数据库运行相关的临时文件,若存在较大文件,需要确认文件用途后,采取清理动作;DN上的/usr/local目录使用系统磁盘,可能有一些运维操作也会在此目录下落盘,需要及时清理;
【典型案例】
升级过程系统盘磁盘使用率会增加,升级完成后会释放占用的系统盘资源。
「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。




