TiDB Duration 99 抖动厉害,99平均都在500ms。

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:

【概述】 场景 + 问题概述

这个TiDB 集群就是一个单纯的Insert 的 集群,QPS 在200-500 之间,但是Duration 高的厉害。慢查设置的是500ms,慢查量比较大。 如果手动插入,测试发现在10ms 左右。 insert 的表有2个TEXT字段,语句大小为20K的样子,没有事务





cpu 使用率 在 10% 左右,IO 在 60% 以下

【背景】 做过哪些操作

【现象】 业务和数据库现象
Duration 很高

【问题】 当前遇到的问题

【业务影响】

【TiDB 版本】
v 4.0.12

【应用软件及版本】

【附件】 相关日志及配置信息

  • TiUP Cluster Display 信息
  • TiUP CLuster Edit config 信息

监控(https://metricstool.pingcap.com/)

  • TiDB-Overview Grafana监控
  • TiDB Grafana 监控
  • TiKV Grafana 监控
  • PD Grafana 监控
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

大部分慢查都是 慢查在prewrite 阶段

  1. 可以参考文档排查 TiDB 写入慢流程排查系列(一)— 前言
  2. 方便上传表结构和insert sql 吗? 或者您可以排查下是否有热点写入
  3. 上传一个带 sql 的慢日志
  4. 麻烦上传一段时间的 tidb.log 日志。

好的,我按照这个流程分析下看看

好的,有疑问请继续跟帖,多谢。