load data时tidb server产生磁盘IO

【版本】v5.0.4
【环境】5tikv+2 tidb 混合部署
【问题】 使用load data 远端进行数据导入初始时10个并发起来,连接的tidb server系统盘sda的磁盘IO压力达到100% 后续停止后,挨个启动中间间隔几分钟,每次启动会有sda盘突增情况,后又IO达到100%,导入速度变慢。导入时设置会话 tidb_dml_batch_size=50w, tikv没什么压力。 为什么会对sda产生IO压力呢?




可以看下是否 SWAP 已关闭,之前处理过因 SWAP 没关导致的该问题。

1 个赞

swap没关,我调整下试试

测试了几次 确实swap问题,设置tidb_dml_batch_size比较低的值能比较平稳

:ok_hand:

TiDB 官网 还是是建议关闭的。

此话题已在最后回复的 1 分钟后被自动关闭。不再允许新回复。