暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

adg日志应用缓慢处理过程

IT那活儿 2022-02-20
1282

点击上方“IT那活儿”,关注后了解更多内容,不管什么活儿,干就完了!!!


近期频繁收到某套库的adg的apply lag告警,而这套库业务上也没有大变化,网络和其它硬件也没有变更,那就从软件层开始排查。


01

故障分析


首先翻看节点日志,其中2节点日志,持续报ORA-04030进程无法分配内存。
查看该tt02进程分配的内存,当前是31G,而系统pga_aggregate_limit参数设置了100G。那大致就可以猜测,大概率是触发bug了。
该进程为后台进程,主要是用来传输日志到备库,在本次案例中,因持续报错,导致传输日志有延迟,导致整体日志应用有延迟。
随后进一步确认Bug 30719327 描述的现象和本次问题比较相似。
而28831971补丁当前版本也是应用过的。

02

解决方案


1. kill问题节点TTnn进程,使该进程重启,但这是临时解决方案,时间时间长了还是要占用大量内存,需定期操作。
2. 尝试应用Patch 30719327,观察进程使用内存情况。


本文作者:金震宇

本文来源:IT那活儿(上海新炬王翦团队)

文章转载自IT那活儿,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论