dm导入问题 load并发 v5.4.0

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【 TiDB 使用环境】
v5.4.0

【概述】 场景 + 问题概述
用dm全量迁移mysql数据到tidb

【备份和数据迁移策略逻辑】

【背景】 做过哪些操作

【现象】 业务和数据库现象

【问题】 当前遇到的问题
配置的并发数量和实际运行的线程数不一致
【业务影响】

【TiDB 版本】

【附件】

  • 相关日志、配置文件、Grafana 监控(https://metricstool.pingcap.com/)
  • TiUP Cluster Display 信息
  • TiUP CLuster Edit config 信息
  • TiDB-Overview 监控
  • 对应模块的 Grafana 监控(如有 BR、TiDB-binlog、TiCDC 等)
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

哪个版本

image

只说一个现象,别人没法查

请问你关注的线程数的原因是什么呢?系统内部设计并不一定会一个并发数对应一个系统线程数。

请问为什么需要在乎线程数量呢?

文档中的这句话有误导么?

pool-size 为 DM Load 阶段线程数量的设置,默认值为 16,正常情况下不需要设置,也可以根据全量数据的大小以及数据库的性能做适当的调整。

loader 里的并发配实际上是向下游写数据库连接数量,如果观察到连接数量和配置是一致的,那就是符合预期的。

该主题在最后一个回复创建后60天后自动关闭。不再允许新的回复。