请教下大家，目前数据mysql以外的数据库同步是怎么做的

xmlianfeng · 2023 年12 月 7 日 06:30

目前是有从mongodb 中同步数据到tidb的需求，请问下大家是怎么同步的~！

ShawnYan · 2023 年12 月 7 日 06:51

mongo 2 kafka, 然后 sink 到 tidb。

Billmay表妹 · 2023 年12 月 7 日 07:30

有几篇社区用户的实践文章，你先看看~

大飞哥online · 2023 年12 月 7 日 07:32

需要中转下，如Kafka

ShawnYan · 2023 年12 月 7 日 07:37

这两篇重点看下，都是采集oplog到kafka，然后写入tidb

普罗米修斯 · 2023 年12 月 7 日 08:49

CloudCanal数据同步试下

ShawnYan · 2023 年12 月 8 日 00:50

请问这个原图在哪里？

Kongdom · 2023 年12 月 8 日 01:05

通过程序接口同步的，没有做数据库层面的同步

oceanzhang · 2023 年12 月 8 日 01:05

optlog用kafka采集同步，不过有些数据得手动处理下

普罗米修斯 · 2023 年12 月 8 日 01:43

CloudCanal首页介绍

随缘天空 · 2023 年12 月 8 日 01:56

上边大家已经说了很多实践方案，如果仅仅是从mongodb 中同步数据到tidb的话，还可以使用一些ETL工具，也很方便，比如kettle、streamsets等

tidb菜鸟一只 · 2023 年12 月 8 日 03:01

cloudcanal最简单，并且可以免费试用

有猫万事足 · 2023 年12 月 8 日 03:03

b站上刷到过一个tapdata从mongodb到MySQL的演示，但我自己没有用过这个。

如果不愿意折腾的话，还是cloudcanal。

zhanggame1 · 2023 年12 月 8 日 06:26

由etl工具，都可以用，比如datax

tidb狂热爱好者 · 2023 年12 月 8 日 06:48

cloudcanal

come_true · 2023 年12 月 8 日 07:37

DG部署

春风十里 · 2023 年12 月 8 日 09:23

同步要求是什么？是实时的话估计要考虑商业同步软件，可以问问国内的英方，dsg，九桥，国外的ogg。
如果是非实时同步，定时同步的，可以考虑kettle或者datax

oceanzhang · 2023 年12 月 21 日 03:50

Kafka，然后要将数据转一下把

system · 2024 年2 月 19 日 03:50

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。