syncer 增量同步mysql数据出错

🪐 TiDB 技术问题
1

为提高效率，提问时请提供以下信息，问题描述清晰可优先响应。

  • 【TiDB 版本】：TiDB-v3.0.2
  • 【问题描述】：[2020/01/14 20:41:23] [info] binlogsyncer.go:776 rotate to (mybinlog.000057, 1044281595) [2020/01/14 20:47:29] [error] binlogsyncer.go:656 io.CopyN failed. err EOF, copied 5684, expected 8203: connection was bad
2
  1. 是同步到一半报错的吗？
  2. 上游 MySQL 有没有发生异常宕机之类的情况
  3. 可以使用 mysqlbinlog 工具解析一下上游 MySQL mybinlog.000057 文件，看是否正常
3

1、不是同步到一半，是主库有新增数据，但tidb未同步，即 增量数据完全没有同步；
2、上游mysql正常；
3、mybinlog.000057日志正常，show binlog events in ‘mybinlog.000057’ FROM 1044281595 limit 100;，截图如下；

image
image2130×720 375 KB

4

完整的 syncer 日志文件上传一下，看下

5

syncer.log (9.2 KB)

6

可以检查一下下游 TiDB 是否发生过重启，看日志像是下游 TiDB 发生重启导致连接断开，syncer 目前对于 bad conection 的错误没有重试的机制，如果需要使用 syncer 可以考虑使用后台进程拉起，当退出时自动拉起

7

启动synce就是拉起的，后台运行，我看下tidb是否有重启过吧，但理论不太可能，tidb直连上去都是可以查的

8

可以写个脚本自动拉起，如果拉起失败，再手动介入解决