初始化同步任务 loading快结束时任务老进行空转,一直卡着 pause然后 auto resume

DM-worker版本
Release Version: v1.0.5
Git Commit Hash: a8e9f53f91e29756b09a22cdc37a6a6efcdfe55b
Git Branch: release-1.0
UTC Build Time: 2020-04-27 06:56:51
Go Version: go version go1.13 linux/amd64


附上dm-worker部分日志dm-worker.log (566.1 KB)

看下 tidb log 在[2020/08/04 19:53:20.352 +08:00] 时间点是否有报错,并且检查下下游同步账户的权限是否正确

99.99% 已经一下午了,权限正确,tidb 偶有 server is busy等,connection refused

先反馈下信息,并执行下 show grants for user@‘ip’;

root 用户啊,啥权限都有啊,重启tidb任务进度就变了,几个任务都经常这样子,烂玩儿意

hi,辛苦上传下 tidb,tikv-detail,node exporter 完整日志,感谢配合

可否使用以下方式,提供下 tikv-detail / tidb / pd 的监控面板截图。感谢配合:


打开 grafana 监控,先按 d 再按 shift+e 可以打开所有监控项。

(1)、chrome 安装这个插件https://chrome.google.com/webstore/detail/full-page-screen-capture/fdpohaocaechififmbbbbbknoalclacl

(2)、鼠标焦点置于 Dashboard 上,按 ?可显示所有快捷键,先按 d 再按 E 可将所有 Rows 的 Panels 打开,需等待一段时间待页面加载完成。

(3)、使用这个 full-page-screen-capture 插件进行截屏保存

不传了,叫天天不灵叫地地不应,奥七八糟的整一堆,公司已经决定弃用这烂玩儿意了,能让任务跑起来我这就算完事了

:upside_down_face:

抱歉,这个帖子您说的问题,看起来是 DM 的问题吗? 除了这个问题,其他觉得有问题的都是 DM 同步这里吗?还有什么问题,麻烦一并吐槽下,多谢。

不单是dm问题,很多任务进度停滞,重启tidb就恢复进度,过一会又停滞,又要去重启tidb么

像这种日志那么多还那么大你让怎么给你,

  1. 从监控看,这个duration 很高, 修改稿参数大概是什么时间点,修改前后有变化吗?
  2. 从 connet 看每个tidb有700多个连接吧。这些连接除了 DM 任务的,还有其他正常的业务连接吗? DM syncer 同步配置了多少数量?
  3. tidb 是什么版本?
  4. 监控这里确实比较多,麻烦先发一个 over-view ,tidb 和 datail-tikv 的监控吧,多谢。