ticdc同步失效

Hacker_92quIrMM · 2022 年9 月 14 日 07:14

【 TiDB 使用环境】生产环境
【 TiDB 版本】 v4.0.12
【遇到的问题】 ticdc 不向下游同步数据
【复现路径】
【问题现象及影响】
1.ticdc 是与tidb集群一同搭建
2.已正常运行一年时间
3.突然数据就无法同步到下游MySQL中了，而且重启任务也没有效果，并且ticdc中没有异常信息

Hacker_92quIrMM · 2022 年9 月 14 日 07:16

而且ticdc节点中的日志光打印如下内容：

Hacker_92quIrMM · 2022 年9 月 14 日 07:36

尝试了重建changefeed任务也没有效果，仍然不会正常同步，查看状态发现同步的时间戳根本不会发生变化

wakaka · 2022 年9 月 14 日 08:09

多等会能看到任务的报错吗？重建是任务同名重建吗？

alfred · 2022 年9 月 14 日 09:51

有大事务吗？

Hacker_92quIrMM · 2022 年9 月 15 日 02:44

没有看到报错，只是再输出 Temporary file remove ,重建的也不是同名的，这又运行了一天了，也还是没有动

Hacker_92quIrMM · 2022 年9 月 15 日 02:45

应该是我在那个时间点用excel导入了一张有40多万条数据的表，然后这个cdc就停了，我猜测和这个问题有关

Hacker_92quIrMM · 2022 年9 月 15 日 03:14

又观察了一会儿，看到了一个下游数据库的错误

wakaka · 2022 年9 月 15 日 05:52

下游mysql有别的程序写入吗，可以看下mysql的deadlock是什么语句，show engine innodb status\G;

wakaka · 2022 年9 月 15 日 05:52

9月13号的数据？ GC设置有这么大吗？

alfred · 2022 年9 月 15 日 06:01

事务重试不成功，有死锁冲突