pump集群其中一台机器宕机,服务器恢复后启动提示["creating pump server failed"] [error="leveldb: manifest corrupted (field 'comparer'): missing [file=MANIFEST-001328]"] [errorVerbose="leveldb: manifest corrupted (field 'comparer'): missing [file=MANIFEST-001328]\

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【 TiDB 使用环境】
4.0

【概述】 场景 + 问题概述
pump集群其中一台机器宕机,服务器恢复后启动提示
[“creating pump server failed”] [error=“leveldb: manifest corrupted (field ‘comparer’): missing [file=MANIFEST-001328]”] [errorVerbose="leveldb: manifest corrupted (field ‘comparer’): missing [file=MANIFEST-001328]

然后我把这个pump节点重新deploy后,启动正常,目前pump集群共有三台机器,挂掉的只是其中一个节点,我deploy这个节点后往下游同步的数据会不会丢失?


挂掉的节点的时间是我重新部署的时间,其他两个节点的时间是发生故障时的时间
【备份和数据迁移策略逻辑】

【背景】 做过哪些操作

【现象】 业务和数据库现象

【问题】 当前遇到的问题

【业务影响】

【TiDB 版本】

【附件】

  • 相关日志、配置文件、Grafana 监控(https://metricstool.pingcap.com/)
  • TiUP Cluster Display 信息
  • TiUP CLuster Edit config 信息
  • TiDB-Overview 监控
  • 对应模块的 Grafana 监控(如有 BR、TiDB-binlog、TiCDC 等)
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

https://docs.pingcap.com/zh/tidb/stable/tidb-binlog-faq#假如有一个-pump-crash-了会怎样

参考这里

目前同步时间正常,没有延迟了,但是变更的数据没有同步到下游的tidb库中,也没有报错,drainer 的日志一直再打印 [2021/12/20 18:04:58.070 +08:00] [INFO] [syncer.go:257] [“write save point”] [ts=429914769316642819] 但是数据就是不往下游同步,麻烦帮忙看下原因

目前同步时间正常,没有延迟了,但是变更的数据没有同步到下游的tidb库中,也没有报错,drainer 的日志一直再打印 [2021/12/20 18:04:58.070 +08:00] [INFO] [syncer.go:257] [“write save point”] [ts=429914769316642819] 但是数据就是不往下游同步,麻烦帮忙看下原因

  1. show pump status/show drainer status 看看目前的状态。
  2. 辛苦上传一下 crash 的完整的 Pump 的日志。

此话题已在最后回复的 1 分钟后被自动关闭。不再允许新回复。