学习2.3.3 Import Data to TiDB(将数据导入 TiDB)

课程名称:课程版本(101/201/301)+ 课程名称

2.3.3 Import Data to TiDB(将数据导入 TiDB)

20min

课程收获:

学会用TiDB数据导入生态工具Lightning和DM 导入数据

课程内容:

内容主要包括:用于导入全量数据的 TiDB Lightning 的概要介绍、功能特性、适用场景及使用示例;用于增量(或全量+增量)数据导入的 TiDB Data Migration 的概要介绍、功能特性、适用场景及使用示例。
学习目标: 了解如何将已有数据导入到 TiDB 集群中

关键知识点: TiDB数据导入生态工具;
TiDB Lightning full import
local KV storage: quick mode; Pebbe ingestSST file
TiDB mode online

MyDump/Dumpling dumpfile / CSV file
Table filting 部分库/表,分区拆分多任务
checkpoint 断点续导入,
Web界面

TiDB Data Migration DM
full/incremental/all
routing upstream to downstream

Binlog event fileter FEATURE
ignore certain binlog event
More fine-gained filtering rule than table filter
donot truncate/delete downstream after truncate/delete upstream table
Filter statement not supported by TiDB

Sharding support DML/ DDL statement
Online DDL pt_osc gh_ost

学习过程中遇到的问题或延伸思考:

  • 问题 1:
  • 问题 2:
  • 延伸思考 1:
  • 延伸思考 2:

学习过程中参考的其他资料