tidb server缩容后显示问题

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:

【概述】
对tidb server节点缩容后,查看grafana监控面板,仍然显示一个down。

重启集群也不消失,这个是什么问题呀?

【背景】做过哪些操作

【现象】业务和数据库现象

【业务影响】

【TiDB 版本】

【附件】

  1. TiUP Cluster Display 信息

  2. TiUP Cluster Edit Config 信息

  3. TiDB- Overview 监控

  • 对应模块日志(包含问题前后1小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

2 个赞

tiup cluster display是什么样的,看看你这个有没有帮助

1 个赞

在此咨询下,一共一个tiflash缩容后,tiup cluster display已经显示Tombstone,然后扩容新增一个tiflash节点,但tiup cluster ed-config 里面还是会显示原有已缩容的节点,怎么删除?

1 个赞

用tiup cluster prune试试,实在不行就tiup cluster scale-in --force强制缩掉

2 个赞

tiup cluster display显示正常,其他地方也显示正常,就是这个界面中down显示1.

1 个赞

curl http://ip:2379/pd/api/v1/stores > stores.json,看这个显示的是啥

1 个赞

有没有你那个tidb的信息

1 个赞

这个命令看的是store的信息吧,我现在是tidb server数量显示有问题。

1 个赞

您这是tidb的什么版本呢,缩容方式,相关日志可否提供下,看看对应的tidb节点是否还有相关进程再跑

1 个赞

版本:4.0.6
我查看了一下缩容的节点服务器,上面还有监控的进程在运行,其他进程没有了。

1 个赞

辛苦重新刷下监控看看还有么,过一段时间会自己清理掉

1 个赞

监控刷新过没效果,grafana组件我也重启过,没效果。
刚才把缩容的节点服务器系统重启了,现在有多了2个down的内容。

1 个赞

您看下对应节点的exporter相关进程有没有,然后换个浏览器或者清下缓存看下监控,看看是否是缓存的影响

系统重启后,没有任何进程了。

换了一个浏览器,没效果。

辛苦看下:/.tiup/storage/cluster/clusters/集群名/meta.yml还有对应的缩容掉的tidb节点么,另外tidb是非混合部署是吧,目前遇到的问题都是过一段时间就down就消失了,这个问题还是第一次看到

这个文件里面,看不到缩容掉的tidb节点了。

您这是正式节点么,如果是测试节点,方便重启下整个集群么,看不到节点的话缩容已经完全成功了,按道理来说down也会很快消失

多谢,已经处理好了,的确时缩容后未销毁引起的

1 个赞

:+1:可以标记下”对我有用“”,让更多人快速找到答案

重启集群也没有效果