sync_diff_inspector数据对比异常退出

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 02:22

【 TiDB 使用环境】 Poc
【 TiDB 版本】5.2.1
【遇到的问题：问题现象及影响】
sync_diff_inspector 做主备集群数据对比的时候总是对比到一半自动退出。
【附件：截图/日志/监控】

dba远航 · 2023 年11 月 22 日 02:25

感觉象是内存不够用引起的

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 02:31

观察了下，内存是够的。

小龙虾爱大龙虾 · 2023 年11 月 22 日 02:35

使用高版本的sync-diff吧，低的可能有bug

tidb菜鸟一只 · 2023 年11 月 22 日 02:35

比对这个表很大吗？比对了多长时间报的错

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 02:41

换了最新版，还是报错，退出时间比较随机，有时候4%,有时候20%多。

Jellybean · 2023 年11 月 22 日 02:47

sync_diff_inspector 在执行这个比对时，持续时间有多久就报错？

看一下链接的上下游集群对应的tidb server 有没有异常日志

此外，可以开启工具的debug 日志，打印更多的信息出来方便排查问题

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 02:51

10秒以内报错

songxuecheng · 2023 年11 月 22 日 06:03

配置文件看下

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 06:05

Fly-bird · 2023 年11 月 22 日 06:19

怀疑是数据表结构不同或者数据类型不兼容导致的，是不是忽略了字段大小写不一致的问题，你看看上下游的大小写字段，先人工比对下

songxuecheng · 2023 年11 月 22 日 06:27

检查一下 37.17pd的日志

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 06:35

目测结构一致

TiDBer_pkQ5q1l0 · 2023 年11 月 22 日 06:39

pd无ERROR日志

songxuecheng · 2023 年11 月 22 日 06:44

在执行一次。把相应时间的pd日志发一下