使用tidb-lighting导入本地文件csv,是否支持过滤错误数据的功能?

为提高效率,提问时请尽量提供详细背景信息,问题描述清晰可优先响应。以下信息点请尽量提供:

  • 系统版本 & kernel 版本
  • TiDB 版本】v3.0.4
  • 磁盘型号
  • 集群节点分布
  • 数据量 & region 数量 & 副本数
  • 问题描述(我做了什么)】 目前正在使用tidb-lightning导入十亿级别数据,因为采用文本形式导入,不可避免个别数据导入时会发生字段错位,导致全体数据导入失败,面对这种场景,是否有参数可以调节呢。
  • 关键词

您好, TiDB Lightning 支持断点续传,详细情况可以参考 PingCAP 官网,官网是个很好的学习资料检索库 https://pingcap.com/docs-cn/v2.1/reference/tools/tidb-lightning/checkpoints/