每到晚上2.30后就会链接超时

检查下 PD 的状态

网络是万兆的么?


同一时间tidb的日志

pd日志


另外两台pd没日志

网络是千兆的,我这个服务器没定时任务,数据很小刚开始跑

没有物理机监控日志,用的它自带的prometheus监控的集群,只能看到他各个组件的日志

该网络下有其它的服务器业务在跑么,日志看还是有短暂的超时

没有其他业务 这是两个物理机用zstack做了虚拟化,只跑了tidb


全是这种超时,时间都在这个时间点

tikv监控看CPU正常

你的监控node-exporter也是超时的,看下zstack的网络情况,或连服务器上层交换机的服务器有没有这种情况,感觉还是网络不稳啊。

感觉跟tidb没啥关系了,看下网络的相关情况吧。

1 个赞

好的我晚上看一下是不是网络有问题

看下该网段内是否有其他数据的跑批

1 个赞

可能是凌晨抽取数据把链接和资源占满了吧?

千兆网络带宽不够的,这配置还不如我家里的台式机,好歹还是 2.5Gb 的… :rofl:

也关注下,夜间同一交换机下的服务器,有没有跑备份的。

我发现两台物理机做的虚拟化的服务器中,同一个物理机下的tidb的服务器之间不会告警,不同物理机下的服务器之间会有延迟,应该是网络有问题,我调整下网络试一下

是的,应该是网络的问题。

感觉大概率网络问题来的,之前有遇到过,同事不信,就脚本循环ping,几秒一个,写日志里面,早上拉出数据给别人看,比较清晰一点

嗯我也搞了个脚本看了下确实是网络问题,我更换了交换机和网线 恢复了

1 个赞

此话题已在最后回复的 7 天后被自动关闭。不再允许新回复。