tikv&tidb升级6.1以后出现一些错误日志

[a398058068]

【 TiDB 使用环境】
生产
【 TiDB 版本】
6.1.0
【遇到的问题】
1.tikv 日志中一直出现[“check leader failed”] [to_store=46] [error=“"[rpc failed] RpcFailure: 12-UNIMPLEMENTED"”]
2. tidb 一直报Got too many pings from the client, closing the connection
【复现路径】做过哪些操作出现的问题
【问题现象及影响】

tikv.log

控制台输出的tidb log

[Billmay表妹 (表妹)]

你做了哪些操作之后出现的？

[a398058068]

5.4升级6.1

tiup cluster upgrade tidb v6.1.0

[a398058068]

有人帮忙解答这个问题么。 资料太少了
唯一能查到的就是

Got too many pings from the client, closing the connection. 和TiKV server timeout

Got too many pings from the client, closing the connection. [image] 这个问题是？如何排障和恢复 故障在22:10左右出现，tikv(TiKV server timeout)和pd(Got too many pings from the client, closing the connection)相继出现error；22:…

感觉无太大帮助

[Aric (Jansu Dev)]

1. "check leader failed" 和下面报错关联性不大，如果非常在意且有业务影响，得沿着日志细追一下。
2. "Got too many pings from the client", 此错误是 tidb 产品组件内部 grpc 探活导致，除打印日志外无其他业务影响。表现出产品行为是 tidb 日志会间歇性出现该 error 报错，触发原理为当 grpc PermitWithoutStream （代码硬限制，非用户可调）设置为 true 时，grpc client 与 grpc server 间即使无活跃连接也会发出探活请求，2 小时内 ping 超过 2 次即打印该日志。

[a398058068]

是的 1是tikv的日志 2是tidb的日志 不过这两个都是升级后出现的 错误1基本上每秒都有 错误2基本上没10秒就会报一次 虽然不影响业务 但是这类错误应不应该报出来 是应该tidb本身通过迭代版本修复 还是说需要用户去排查解决这类问题。 这么一直报不管的话很奇怪 也不知道会不会出现一些隐形问题。 这俩错误的解答网上基本上=0

[Aric (Jansu Dev)]

嗯嗯，问题 2 TiDB 内部已排查出该类问题，会在后续版本修掉。

[a398058068]

tikv.log (18.8 MB)

问题1的全日志我也传一份吧。 目前也没看出来相关的上下文。

[weixiaobing]

问一下。这个是6.1 版本的BUG吗？

[我是咖啡哥]

我升级后也是遇到刷好多这个日志：
[advance.rs:296] [“check leader failed”] [to_store=111521721] [error=“"[rpc failed] RpcFailure: 12-UNIMPLEMENTED"”]

[Lily2025]

这个日志是升级过程中打的，还是升级成功后还一直在打？

[我是咖啡哥]

成功后还会一直打。我的也一样。

[mayjiang0203]

@我是咖啡哥

[advance.rs:296] [“check leader failed”] [to_store=111521721] [error=“”[rpc failed] RpcFailure: 12-UNIMPLEMENTED""]

info 类型的错误可以忽略，这个错误其实是正常流程就会遇到的，发起 RPC 实例收集到足够的信息就会主动 cancel， cancel 了就会报这个错，master 上已经优化这种问题，过滤掉了 cancel 类型的错误。

[cs58_dba]

按大佬的意思就是跟backoff错误一样忽略