TiCDC写入kafka时,kafka不断接收到不可见字符的消息

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【 TiDB 使用环境】
新搭建的测试环境

【概述】 场景 + 问题概述
kafka不断接收到不可见字符的消息,如下图所示:

如果消费kafka消息展示出来不加cat -v时,发现json头的几个字符发生丢失,如下图所示:


【备份和数据迁移策略逻辑】

【背景】 做过哪些操作

【现象】 业务和数据库现象

【问题】 当前遇到的问题

【业务影响】

【TiDB 版本】
v4.0.10
【附件】

  • 相关日志、配置文件、Grafana 监控(https://metricstool.pingcap.com/)
  • TiUP Cluster Display 信息
  • TiUP CLuster Edit config 信息
  • TiDB-Overview 监控
  • 对应模块的 Grafana 监控(如有 BR、TiDB-binlog、TiCDC 等)
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

1赞

当没有数据写入时,同步任务会往kafka写个空消息。表明当前同步任务正常,并且更新tso,这样可以判断有没有延迟。

可以参考下这个贴子:

3赞

感谢回复!请问下json的前面几个字符丢失这个如何解决?

1赞

没太明白,如果和当前贴子不相关的问题,建议重新开个贴子问一下。 这样帮助解决问题的人多一些。

1赞

请见主题的最后一张图,按官档说json输出应该是:
{“u”:{“create_time”:{…
但实际输出的却是:
":{“create_time”:{…
消息的头陪缺少了{"u

关于 json 字符消失你可以另起一个 帖子~可以更好地获得帮助~

好的,谢谢