pd tso wait duration 慢,导致请求卡住

每天都会有超过 2s 的 tso wait,导致请求卡住,这个如何排查是什么问题导致

  1. PD TSO Wait Duration:TiDB 等待从 PD 获取 TS 的时间
  2. 可以参考此文档检查
    https://docs.pingcap.com/zh/tidb/stable/troubleshoot-cpu-issues#pd-异常

看了下同一时刻 kv cmd duration 比较高, 但 grpc message duration 相对较低,而期间 CPU 占用都比较低,因为网络问题(tidb 与 tikv 之间)?

同样那个时刻 pg 和 tidb 之前也可能存在网络问题? blackbox 服务没有启用,还有其他方式可以确认吗?

如果 tidb 和 tikv 的服务器都没有太大的资源占用,那么大概率是网络问题。