【 TiDB 使用环境】测试
【 TiDB 版本】V6.1
【遇到的问题】
生产中会遇到单表TB级别的数据处理
【问题现象及影响】
现在准备这种单表TB级别的测试场景,准备数据的时候,通过JDBC的方式往表里插入数据,效率很低,想请教一下大家,这种单表TB级别的测试数据,可以怎么高效的去准备?
tiup bench 可以造数据。
通过K8S方式部署的tidb集群,可以使用tiup么?
K8S中的TiDB 需要用 TIDB Operator 来管理。
sysbench
数据量到达一定程度,sysbench就不行了,因为sysbench造的表,有一个字段的默认类型是int,到达int极限值就不行,而且每条数据都很小
TIDB Operator 管理集群,功能是和tiup一致么?
最好是将数据脱敏,备份出来,随时用,要准备生产到下游的数据湖,摄取大量测试数据时,从数据湖中抽取或者备份,不影响生产