tidb tikv节点offline

【 TiDB 使用环境】生产环境
【 TiDB 版本】 5.2.1
【复现路径】tiflash 突然oom 之后就一直自动重启oom 无法启动,scale-in,重新scale-out 也不行,手动删除pd 内同步store id和同步规则,后提示删除成功,查询还能查询到,tiup cluster display 显示tiflash 正常了,结果tikv 节点全部都offline 的状态了
【遇到的问题:问题现象及影响】
【资源配置】
【附件:截图/日志/监控】

1、tiflash 扩缩前 有没有先把tiflash的表取消
2、这个是删除的具体是哪个规则(placement?)和操作方式?

3、pd-ctl store看下tikv是offline的吗 ,估计和你前面删除的规则有关。如果Pd-ctl看也是offline可以试试下面命令能不能把他变up
curl -X POST http://:/pd/api/v1/store/<store_id>/state?state=Up

应该是store 删除多了 那个store 还能恢复 online 么?

按上面的命令恢复, 老是被截断

应该可以了,缩容前是通过alter table set tiflash replica 0; 取消的同步表

按照官方文档 https://docs.pingcap.com/zh/tidb/stable/scale-tidb-using-tiup
里面的操作的删除的规则,因为删除store 那里说的不是很详细,我还以为命令查出来的store id 都要删除掉呢,还好能恢复
curl http://10.30.30.3:2379/pd/api/v1/config/rules/group/tiflash
curl -v -X DELETE http://10.30.30.3:2379/pd/api/v1/config/rule/tiflash/table-427133-r

谢谢大牛了!

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。