datax加上crontab的定时任务
开发不愿意做就别做啊,又不是运维的要同步
领导要求保留历史数据。实在不行,就说数据库层面做不了。除非人工手动导出导入
这个要领导取刚了
TurboDX
TiCDC 我记得可以做 event 做过滤。
有。但是是6.5以后才有相关配置。我那是4.0的版本
应该不行
要么升级集群版本,要么程序实现。
程序实现其实也不难,我以前在Oracle实现过类似功能。注意除了定时任务,还要有校验比对功能,以及错误数据重传功能,Python试下?
楼主你是 v4.0.2 版本的集群,建议不要使用 TiCDC 工具,在这个版本的cdc有些严重的坑点,容易耗光pd集群 etcd 存储元数据的空间。如果要用,建议得用 v4.0.16 以后版本的 TiCDC来同步。
建议通过其他逻辑方式(dumpling 、flink、脚本等)来实现同步,这么老的集群不管是binlog或者 cdc方式,里面的坑点都不少。
2 个赞
只能是这样了,如果同步,只能用dumpling导出导入了
应该不支持,otter工具必须基于binlog格式才行
此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。