TIDB从2.14升级到3.05后异常情况

为提高效率,提问时请尽量提供详细背景信息,问题描述清晰可优先响应。以下信息点请尽量提供:

  • centos7 & CentOS Linux release 7.3.1611
  • TIDB3.0.5
  • 阿里云ssd
  • 2pd && 2tidb && 3tikv
  • 数据2T左右 & region 数量 & 副本数
  • 按照官网文档从2.1.4升级到3.0.5,升级以后tikv 磁盘io高居不下,就算没有数据io也很高
  • TIDB升级以后io暴增

以前2.1.4的时候数据也这么多,但是当时瓶颈在pd, pd的cpu 内存都占用特别高.但是升级以后pd的内存cpu的利用里都很低,当时tikv的io也非常低。升级以后数据的处理速度明显提升,提升大概2.5倍。但是tikv在io方面的表现却不如人意。就算深夜没有1条sql跑 io也是非常高。期待各位的回复。真心的表达感谢。

麻烦提供一下io 高相关的监控

审计以后tikv监控里面看不到io 我是用系统命令iostast 看到的 tidb tikv是能获取到数据到

升级后执行 rolling_update_monitor 了吗

执行了的,在其他都集群也看不到,pd tidb 其他都可以看到,tikv都相关信息看不到

您好: 请查看cluster-tikv-detail和cluster-tikv-summary是否有信息展示,多谢

cluster-tikv-detail和cluster-tikv-summary都是有正常的数据的,cluster-tikv没有数据。

您好: 新版本,查看这两个视图和t’rouble-shooting视图对于tikv来说,原本这个视图不用查看了,多谢。 对于IO使用高的问题,麻烦查看下监控,您说没有数据的时候IO也很高,是tidb哪里消耗的? 或者说,这个磁盘上有没有其他程序也在使用?

1赞