暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

记一次TiDB优化

PingCAP 2023-07-05
153

作者:58公司 春雷

1、汇总

1.1、问题

问题:某订单业务准备迁移,开启双写后,发现业务的消息有积压,关闭双写后即恢复

业务层分析:业务开启双写的方式为:异步处理,线程池,其中一个线程池消费慢的话,会导致整体变慢

数据库层分析:数据库消费能力差(SQL执行时间长),导致上游业务出现堆积

处理及优化:

业务层:后期会改成消息队列的方式,即消费慢的话也不会影响整体

数据库层:优化数据库层,减少SQL执行时间

1.2、优化前后对比

img

2、具体

2.1、集群信息

img

2.2、当前问题

img

2.3、当前问题监控情况

2.3.1、 Raft store CPU

img

2.3.2、SQL执行时间

img

2.3.3、cpu情况

img

2.3.4、IO情况

img

3、优化

3.1、优化具体

<1>版本升级

3.0.2 升级至 3.0.5 完成

<2>更改tikv的参数

store-pool-size

  • 处理 raft 的线程池线程数。
  • 默认值:2
  • 最小值:大于 0

[raftstore]的 store-pool-size 2改成4 完成

<3>开启静默region 完成

用于减少 raftstore CPU 的消耗

将 raftstore.hibernate-regions 配置为 true

<4>开启region merge

Region merge 指的是为了避免删除数据后大量小甚至空的 Region 消耗系统资源,通过调度把相邻的小 Region 合并的过程。 在后台遍历,发现连续的小 Region 后发起调度。

4、优化前后对比

4.1、优化前后对比

img

4.2、优化前后的监控情况

4.2.1、优化前后SQL执行时间

【优化前】

img

【优化后】

img

4.2.2、 优化前后Raft store CPU情况

【优化前】

img

【优化后】

img

4.2.3、 优化前后CPU情况

【优化前】

img

【优化后】

img

4.2.4、 优化前后 IO使用情况

【优化前】

img

【优化后】

img

4.2.5、优化前后各个tikv实例的region等情况

【优化前】

img

【优化后】

img

相关阅读:

再记一次业务优化

「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论