帮忙看一下这样的999时延正常吗

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【 TiDB 使用环境】

Tidb V4.0.10

【概述】 场景 + 问题概述
30个TIDB实例, 每个的QPS大约在300左右, 另外发现当qps到达500的时候, 延迟会非常明显
TIKV的实例也大概在30左右

【问题】 当前遇到的问题

帮忙看一下当前load情况下, 大约3.4s的999时延正常吗?



监控(https://metricstool.pingcap.com/)

  • TiDB-Overview Grafana监控
  • TiDB Grafana 监控
  • TiKV Grafana 监控
  • PD Grafana 监控
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

有点高,该时间段的 sql 可以拉出来看下

1赞

这段时间主要是一些insert 的语句

另外最近半小时 有个show variable like ? 执行的非常频繁

热力图来看 insert 还是很频繁的 ,可以看看 tidb server cpu 以及 tikv 的相关指标,看看是哪个组件到了瓶颈

1赞


看起来是有些机器上的池盘快io打满了?

像这种逐渐升高的情况,多数是遇到了瓶颈,建议可以在 asktug上搜“读流程”/“写流程”,有2个帖子会介绍,怎么定位原因

1赞