9012 (HY000): TiFlash server timeout

muliping · 2022 年6 月 22 日 05:50

是的，这个能排查一下吗？
Error while dialing dial tcp 192.168.21.57:3930: connect: connection refused

zhenda · 2022 年6 月 22 日 07:39

pod里面不能生成的端口，能进一步指导一下么

zhenda · 2022 年6 月 22 日 07:45

没有产生3930端口服务，为什么grafana和dashboard看不出来呢

Min_Chen · 2022 年6 月 22 日 07:59

你看下 9009 端口是什么进程，另外看下 pod 的 spec，通过命令 kubectl -nnamespace get po tidb-tiflash-0 -oyaml --export

zhenda · 2022 年6 月 22 日 08:02

spec：
spec.log (6.5 KB)

zhenda · 2022 年6 月 22 日 08:08

9009端口进程：

Min_Chen · 2022 年6 月 22 日 08:20

spec 没问题，辛苦拿一下没有 3930 端口的这个 tiflash 的日志，从本次启动到最新的，多谢。

zhenda · 2022 年6 月 22 日 08:23

上面已提供了tiflash日志
刚重启过得tiflash日志：
tiflash-all.log (162.8 KB)

zhenda · 2022 年6 月 22 日 08:26

2个tiflash pod 都没有3930端口

hehechen · 2022 年6 月 23 日 06:55

TiFlash 的配置文件能否上传一下呢

zhenda · 2022 年6 月 23 日 07:29

感谢提醒，结合https://docs.pingcap.com/zh/tidb-in-kubernetes/v1.1/deploy-tiflash#%E4%B8%8D%E5%90%8C%E7%89%88%E6%9C%AC%E9%85%8D%E7%BD%AE%E6%B3%A8%E6%84%8F%E4%BA%8B%E9%A1%B9，显示添加了3930端口，tiflash能看到端口了。
另外，一直tiflash在报，2022.06.23 07:24:37.527080 [ 10 ] pingcap.tikv: region {25832,5,1466} find error: peer is not leader for region 25832, leader may Some(id: 25835 store_id: 53)帮看下

hehechen · 2022 年6 月 23 日 07:53

raft 消息也会走 3930 端口，之前这个端口没监听应该会有影响。现在能监听端口后，还会持续打印这个错误日志吗？

zhenda · 2022 年6 月 23 日 08:32

好像不报了，再观察下。请教一下，为啥报相同peer is not leader for region 25832，这个region 25832 是记录了什么元信息么，借着案例经验沉淀一下

hehechen · 2022 年6 月 23 日 10:03

region 25832 没啥特殊的，就是普通的数据region。

gengliqi-PingCAP · 2022 年6 月 23 日 10:32

三个 TiKV 的日志能上传一下吗？

zhenda · 2022 年6 月 23 日 10:33

感谢您关注，问题已解决啦

zhenda · 2022 年6 月 23 日 10:35

隔了一段时间看，还有warning，

，刚出现的

hehechen · 2022 年6 月 23 日 10:36

是一直有数据写入吗？

zhenda · 2022 年6 月 23 日 10:39

一个表tiflash刚才初始化完，现在没有数据写入了。

zhenda · 2022 年6 月 23 日 10:40

帮深入看下这个region id 为啥一直报 not leader