TiCDC v6.5.1 不往下游同步数据

kkpeter · 2023 年6 月 2 日 23:39

【 TiDB 使用环境】生产环境 /测试/ Poc
【 TiDB 版本】v6.5.1
【复现路径】做过哪些操作出现的问题
【遇到的问题：问题现象及影响】
Unified Sorter on disk data size, 这个值一直在涨，但是cdc 不往下游写数据
【资源配置】
【附件：截图/日志/监控】

zhanggame1 · 2023 年6 月 3 日 00:29

是不是数据量很大内存不够用了，ticdc用的机械盘吗？

kkpeter · 2023 年6 月 3 日 00:59

使用的ssd, 内存使用量不到1/10

kkpeter · 2023 年6 月 3 日 01:00

关键这会儿都不知道，cdc到底在干啥

kkpeter · 2023 年6 月 3 日 01:02

xfworld · 2023 年6 月 3 日 10:24

检查下changfeed 的状态和运行日志

dba-kit · 2023 年6 月 4 日 14:13

是不是有大事务？可以看下output count的大小，看是否在同步数据

kkpeter · 2023 年6 月 5 日 02:27

应该是有大事务

dba-kit · 2023 年6 月 5 日 05:39

6.5.1貌似默认就会拆分大事务，是创建changefeed时候专门指定不拆分事务了？

asddongmen · 2023 年6 月 5 日 07:09

下游是什么？看看监控写下游的延迟。
能不能多贴一些监控指标，比如 dataflow 那一栏的指标。
看看 lag analyze 那一栏的监控。
ResolvedTs 推进吗？还是一样的卡住了。
看看日志有没有什么报错，有没有 “too long” 关键字。

如果可以，希望您可以提供脱敏后的日志供排查，谢谢。

redgame · 2023 年6 月 6 日 23:23

看看 lag analyze