drainer删除后,alert manager还一直在告警

【 TiDB 使用环境】生产环境
【 TiDB 版本】V5.3.3
【复现路径】使用tiup删除drainer服务后,还一直在告警,怎样去除drainer服务的告警呢?
【遇到的问题:问题现象及影响】
【资源配置】进入到 TiDB Dashboard -集群信息 (Cluster Info) -主机(Hosts) 截图此页面
【附件:截图/日志/监控】
image

重启下grafana?

show drainer status;看看drainer状态

重启过了,一样还是会告警出来

查看drainer状态,没有显示这个drainer了

应该要reload 一下promethues,告警的数据是从prom 采集的

1 个赞

tiup cluster reload tidb-prd-bill -N promethues

都重启过了,还是一样会告警出来

tiup cluster restart tidb-prd-bill -R prometheus reload和restart有什么区别呢?

看下 tiup 模版 .tiup/storage/cluster/clusters/${cluster_name}/config-cache/prometheus_${ip}_${port}.yml 里,是不是还有这个被删掉的 drainer ,有的话手工删掉,然后再 tiup reload prometheus

2 个赞

reload 表示先上传配置文件,然后 restart;
restart 表示 restart 就可以了

.tiup/storage/cluster/clusters/${cluster_name}/config-cache/prometheus_${ip}_${port}.yml这里面需要手工删除,/data/tidb/tidb-deploy/prometheus-9090/conf/prometheus.yml里面也需要手工删除,这二个删除后,就不会再告警出来了,感谢各位的回答,谢谢

操作二 reload 就可以了

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。