ticdc 同步任务延迟问题

【TiDB 版本】 v4.0.6

【TiCDC 版本】v4.0.9

背景
一共有100个同步任务,部署在3个cdc节点。每个同步任务同步1张tidb表,往阿里云同步。

监控
通过监控 checkpoint-ts 来判断延迟情况,然后进行告警。

异常
正常情况延迟在1-20s,而没有数据更新的同步任务偶尔会报延迟超过2分钟以上。 大概持续1分钟左右就恢复了。

请问一下这个是什么引起的,为啥没有数据变更的同步任务会延迟这么高。

使用 change feed checkpoint lag 来判断延迟情况。