tidb节点已经删除,但是dashboard上仍然显示节点挂掉的报警

【 TiDB 使用环境】测试
【 TiDB 版本】v6.1.2
【复现路径】tidb节点移除
【遇到的问题:问题现象及影响】dashboard上提示tidb节点挂掉的报警
【资源配置】
【附件:截图/日志/监控】



怎么移除节点的啊,Alerts 持续多久了啊

tiup scale-in 持续一个星期了

:thinking:你看看 Prometheus 里面的 alert 有么

我测试站也有这问题,我6kv,直接强制缩容俩节点,在新加俩节点就会出现这种情况。不影响使用,目前我还没找过原因。

重启下普罗米修斯和grafana 试试呢?

看一下prometheus的node exporter 的 target.json文件,是不是旧的IP没有下掉。如果是的话可以把ip删掉,重启prometheus

小哥哥,在哪个目录下面

我这边单独重启alertmanager 和prometheus 后没了。

我重启过prometheus,仍然不可以

/data/tidb-deploy/prometheus-9090/conf/prometheus.yml

tiup有时候就不干净 加上节点再一次移除就好了。

1 个赞

没有救了,按照这个说法弄了,升级了tiup版本又弄了一次还是不可以

没有用

tiup cluster reload -R prometheus

解决办法为把prometheus节点scale-in,然后重新安装一遍prometheus

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。