添加PD节点，检查是否添加成功时长时间无响应

🪐 TiDB 技术问题 部署&运维管理
1

为提高效率，提问时请提供以下信息，问题描述清晰可优先响应。

  • 【TiDB 版本】：3.0
  • 【问题描述】：扩容PD节点，进行到使用pd-ctl检查是否添加成功这一步的时候，长时间没有响应

若提问为性能优化、故障排查类问题，请下载脚本运行。终端输出的打印结果，请务必全选并复制粘贴上传。

2

您好： 具体执行了什么命令，能否截图展示一下？ 另外请上传PD的日志，多谢

3

pd.rar (369.2 KB) /home/tidb/tidb-ansible/resources/bin/pd-ctl -u “http://172.16.85.49:22378” -d member

4

您好： 1. 请问当时执行start_pd.sh成功了吗？ 2. 能否反馈一下inventory.ini 和 start_pd.sh的脚本？
3. ./pd-ctl -i -u http://127.0.0.1:2379 举例进入到交互模式下，检查下health状态 https://pingcap.com/docs-cn/stable/reference/tools/pd-control/#简单例子

5

1.执行start_pd.sh后没有提示消息，进程是瞬间结束了，我当时以为成功了
2.start_pd.sh (160 字节) inventory.ini (2.7 KB)
3.执行后，使用health命令如下图

image
image1039×85 2.61 KB

6

执行以下，cluster，config show这些命令能成功吗？

7

image
image1305×108 5.5 KB

均失败

8

您好： 1. 麻烦反馈下脚本，新机器增加：{deploy_dir}/scripts/run_pd.sh 2. 请反馈一下，pd进入的命令，是使用老的PD-server进入的吗？ ./pd-ctl -u : -i
举例 ./pd-ctl -u http://172.16.5.89:2679 -i

9

1.run_pd.sh (654 字节)
2.是用的新的PD进入的

10
  1. 使用老的pd地址查看状态
  2. http://172.16.85.49:22379 是老的pd-server？ 新加入的是http://172.16.85.49:22381吗？ 在同一台机器扩PD？
11

1.使用老的PD查看状态，同样报no such host 2是的，在同一机器扩的

12
  1. 麻烦在上传一个新的PD日志
  2. ps -ef | grep pd 存在pd的进程吗？
  3. 使用pd-ctl命令时，是 pd-ctl -u pd-server:<pd_client_port> -i
  4. 能否使用另一台机器添加测试一下？ 不要使用同一台机器
13

1.pd.rar (370.2 KB)
2.存在PD的进程，如图

image
image1543×454 450 KB

新的机器待明天添加了

14
  1. 根据第一次反馈的日志，应该是在16：33分添加的pd： [2019/12/04 16:33:14.837 +08:00] [INFO] [server.go:145] [“start embed etcd”] [2019/12/04 16:33:14.838 +08:00] [INFO] [etcd.go:117] [“configuring peer listeners”] [listen-peer-urls="[http://172.16.85.49:22381]"] [2019/12/04 16:33:14.838 +08:00] [INFO] [systime_mon.go:25] [“start system time monitor”] [2019/12/04 16:33:14.838 +08:00] [INFO] [etcd.go:127] [“configuring client listeners”] [listen-client-urls="[http://172.16.85.49:22378]"] [2019/12/04 16:33:14.838 +08:00] [INFO] [etcd.go:600] [“pprof is enabled”] [path=/debug/pprof] [2019/12/04 16:33:14.838 +08:00] [INFO] [etcd.go:297] [“starting an etcd server”] [etcd-version=3.3.0+git] [git-sha=“Not provided (use ./build instead of go build)”] [go-version=go1.12] [go-os=linux] [go-arch=amd64] [max-cpu-set=4] [max-cpu-available=4] [member-initialized=true] [name=pd_Pd2] [data-dir=/home/tidb/deploy/data.pd] [wal-dir=] [wal-dir-dedicated=] [member-dir=/home/tidb/deploy/data.pd/member] [force-new-cluster=false] [heartbeat-interval=500ms] [election-timeout=3s] [initial-election-tick-advance=true] [snapshot-count=100000] [snapshot-catchup-entries=5000] [initial-advertise-peer-urls="[http://172.16.85.49:22381]"] [listen-peer-urls="[http://172.16.85.49:22381]"] [advertise-client-urls="[http://172.16.85.49:22378]"] [listen-client-urls="[http://172.16.85.49:22378]"] [listen-metrics-urls="[]"] [cors="[]"] [host-whitelist="[]"] [initial-cluster=] [initial-cluster-state=existing] [initial-cluster-token=] [quota-size-bytes=2147483648] [pre-vote=true] [initial-corrupt-check=false] [corrupt-check-time-interval=0s] [auto-compaction-mode=periodic] [auto-compaction-retention=1h0m0s] [auto-compaction-interval=1h0m0s] [discovery-url=] [discovery-proxy=] [2019/12/04 16:33:24.838 +08:00] [INFO] [backend.go:85] [“db file is flocked by another process, or taking too long”] [path=/home/tidb/deploy/data.pd/member/snap/db] [took=10.000125447s]

我想看在这之后的日志，但是第二次反馈的只是到12月4号，日志反馈的不全，多谢。 2. 请查看pd-ctl使用的ip和端口是否正确，感觉使用的不对: ./pd-ctl -u http://172.16.85.49:22379 -i ,进入后执行cluster，或者store看下是否成功. 3. 如果第二步还报错，如果这是一个测试环境，没有什么数据，能否尝试kill掉这个10693添加的进程，看下第二步能否成功.

15

/home/tidb/tidb-ansible/resources/bin/pd-ctl -u “http://172.16.85.49:22379” -i
应该没有错吧，确实是报错的，日志确实就这些了，kill掉进程后，依然报错，如图

image
image1527×449 445 KB

16

你的引号是中文的，这里别打引号了，类似这样就行

[root@test4 ~]# /home/tidb/ryl/tidb-ansible/resources/bin/pd-ctl -u http://172.16.x.xx:xxxx -i » cluster { “id”: 6739710192564496981, “max_peer_count”: 3 }

17

。。确实是引号问题，现在没报错了

18

那你在重新按照步骤测试一下，有问题再联系，多谢

19

好的，非常感谢

20

:+1: