TiDB tikvclient_backoff_count error频繁告警

今天,我把阈值改成100,现在看到的告警内容,这个error重试次数已经达到了155次,查看tidb面板的慢sql,也能看到有一些insert的情况,这些insert都是dm集群在同步上游的语句,同时查看这个时间点的binlog日志也才2个,所以猜想写入的量应该也不大。
问题:
1、这个监控的重试次数是如何统计的?
2、是否还能通过其他手段去确认这个告警的原因?毕竟告警的阈值不能无限调大。(critical的阈值是6000)

expr: increase( tidb_tikvclient_backoff_seconds_count[10m] ) > 100
告警内容:
image
监控图


慢sql查询

DM集群在这个时间点附近的binlog日志:
image