使用TiDB Operator在Rancher管理的私有Kubernetes集群上部署TiDB, 增加部署TiFlash引擎节点,tiflash 容器一直CrashLoopBackOff

【 TiDB 使用环境】测试环境
【 TiDB 版本】5.4.0
【遇到的问题】使用TiDB Operator在Rancher管理的私有Kubernetes集群上部署TiDB, 增加部署TiFlash引擎节点,tiflash pod 一直crashloop
【复现路径】基于官方指定文档https://docs.pingcap.com/zh/tidb-in-kubernetes/stable/deploy-tiflash 部署tiflash,出现该问题
【问题现象及影响】
【TiDB Operator 版本】:1.3.2
【K8s 版本】:1.20.11
【rancher版本】:2.5.8
【具体报错】:CrashLoopBackOff: back-off 5m0s restarting failed container=tiflash pod=tidb-cluster-tiflash-0_tidb-admin(ea3974f6-7335-4854-b343-e92d8c764a39)
tiflash容器error日志:
2022.05.12 09:54:28.506982 [ 1 ] Application: Not found: path
【其他说明】 TiDB cluster 使用 pingcap官方helm chart 部署

有报错日志吗?上传看一下?

Tiflash server log

2022.05.13 02:14:29.990411 [ 1 ] <Information> Application: starting up
2022.05.13 02:14:29.995465 [ 1 ] <Error> Application: Not found: path
2022.05.13 02:14:29.995493 [ 1 ] <Information> Application: shutting down
2022.05.13 02:14:29.995800 [ 2 ] <Information> BaseDaemon: Stop SignalListener thread
2022.05.13 02:14:54.799129 [ 1 ] <Information> : Starting daemon with revision 54381
2022.05.13 02:14:54.801740 [ 1 ] <Information> : TiFlash build info: TiFlash 4.1.0
Release Version: 408010076
Git Commit Hash: 4080100761d192ff1e7762b0b361979e5e306abf
Git Branch:      master
UTC Build Time:  2020-03-02 01:18:51

error log

2022.05.13 02:14:29.995483 [ 1 ] <Error> Application: Not found: path
2022.05.13 02:14:54.806764 [ 1 ] <Error> Application: Not found: path
2022.05.13 02:15:20.041945 [ 1 ] <Error> Application: Not found: path
2022.05.13 02:16:08.746447 [ 1 ] <Error> Application: Not found: path
2022.05.13 02:17:38.661486 [ 1 ] <Error> Application: Not found: path
2022.05.13 02:20:20.816318 [ 1 ] <Error> Application: Not found: path

能看到这些log

怀疑跟K8s节点的容量(或者K8s的资源总量)有关系。又试下下,在资源容量较多的K8s集群上部署TiFlash没有出现该问题。

此话题已在最后回复的 1 分钟后被自动关闭。不再允许新回复。