mysql数据迁移到tidb

为提高效率,提问时请提供以下信息,问题描述清晰可优先响应。

  • 【TiDB 版本】:5.7.25-TiDB-v3.0.13
  • 【问题描述】:使用loader 将mydumper导出的数据导入到tidb中 抛出异常,请问如何解决
    需求点:(原库和目标库名不同)
    1、部分表需要合库合表(原库带有 序号 表也带有序号,导入到tidb中集成一个库一张表)
    2、部分表仅需要合库(原库带有序号,表不带序号,如1号库中有该表 2号库中不存在

实际操作结果
1、写了规则后,只有合库合表的表开始导入了,合库的表没有建出
2、合库合表的数据量不正确 ,loader执行多次中断
多次使用命令 ./loader -c config.toml -t 1 数据间歇性导入????

附件是 loader日志以及config配置信息 求老师解答 正确使用姿势!
config.toml_check (4.1 KB) loader.log.202010191134_error_fatal (161.3 KB)

loader 已经停止维护,可以转到 lightning 上,规则写起来可能轻松些:
https://docs.pingcap.com/zh/tidb/stable/tidb-lightning-backends#从-loader-迁移到-tidb-lightning-tidb-backend

那这个增加了 tidb机器的成本,这个迁移工具可以使用pd节点么

可以的。

好的 我去测试一下之后再反馈

ok。

使用lightning导入正常 但是正则匹配这块还是感觉很不友好 文档不全面
匹配规则这块说明不太清晰

非常感谢你的反馈, 可否在 pingcap/doc-cn issues 中对你反馈的问题提交下, 看文档团队如何来优化这一问题

此话题已在最后回复的 1 分钟后被自动关闭。不再允许新回复。