tidb如何做数据集市

[TiDB 版本]
v5.0
[问题描述]
传统数据仓库中过ETL、多表关联、指标加工、形成新的数据模型、数据集市,如oracle通过存储过程处理,最终建立了多层级的事实表、dm层表。
但在tidb不支持存储过程情况下,如何实现,通过复杂查询、多层级视图吗?如何实现数据集市?谢谢。

这个有点难为TIDB了。

一般 TiDB 不太用来做传统数仓,但是也有一些轻量的用户用 TiDB 做类似工作。这里有几个选择,一方面 TiDB 会更倾向于实时写入,因此一部分用户选择使用 Apache Flink 代替存储过程实时建模;另外也有一部分用户使用 TiSpark 的批量写入进行 ETL 和建模。

:sweat_smile:刚入门tidb,看到有介绍说可以做数仓,想了解下。

谢谢。Flink和TiSpark不是很熟悉,考虑过同步到pg后再处理,如ticdc+canal to postresql 或 datax,但还需要实验。

欢迎测试输出评测文档。