TiDB要先全量后续实时同步到StarRocks的方案有推荐的吗?

目前有从TiCDC同步到Kafka再到StarRocks,但该链路问题不少,比如Kafka Connector任务遇上写入超时或其他原因后异常中断等问题……
FlinkCDC直接同步到StarRocks的话,有其他小组在做,但好像也遇到了同步瓶颈之类的。

从 kafka 在 通过cdc 到 starrocks 会是比较好的选择,除了kafka,还可以用 nfs,S3等等方式了

全量数据通过 DS 或者外表挂载的形式,手动操作吧

推荐使用 TiCDC + Kafka + StarRocks** 或 Flink CDC 直接同步到 StarRocks的方案,前者解耦灵活但需优化Kafka链路稳定性,后者架构简洁但需解决同步性能瓶颈。