提供一个工具,可以把Debezium kafka 数据(DDL+DML)同步到 tidb

tidb 可以提供一个工具,把Debezium kafka 数据同步到 tidb,这样可以把异构的数据库同步到tidb。在tidb 中做数据分析或者数据库迁移。类似flink 有一个项目https://github.com/ververica/flink-cdc-connectors,就是基于Debezium实现的。可以提供一个tidb-cdc 项目。

在政务或国企中,数字化转型,继续要不同数据库的数据同步到数据中台,数据集成是很头疼的问题,很多系统用的是oracle, sqlserver等,不像互联网用mysql 比较多。

Debezium kafka 可以同步到 Flink ,然后从 Flink 到 TiDB 么? 现在 Flink 有 connectors 可以同步到 TiDB。Debezium kafka 应该需要提一个需求。

@melin 目前 TiDB 还没有直接支持 debezium kafka source,此类需求还在在评估中,不过不在近期的计划中。 因为 tidb 是 mysql 协议的数据库,有一些第三方生态可以直接使用,也非常欢迎交流使用经验,比如使用 jdbc connector 从 kafka 同步到 tidb.

我们在做一个数据服务产品, 是用来解决这种问题的, 产品支持数据在 kafka, mysql(pxc), oracle(rac, i/g/c), sql server, db2, mongodb, postgres, gaussdb, es, 也包括 tidb 等等一些数据源在数据库之间流转, 并且支持了基于日志的实时同步, 有界面可以配置和管理任务, 还支持在同步过程中做宽表合并一类的事情

可以尝试来用一下? 名字叫 tapdata, 是企业产品, 开源版本的实现还在计划中

@Lucien-卢西恩 建议可以聊一下合作

此话题已在最后回复的 1 分钟后被自动关闭。不再允许新回复。