lightning导入数据如何控制速度

愚者之眷 · 2022 年11 月 11 日 09:25

lightning导入数据时，采用backend = “tidb”，如何控制导入的并发sql？

buddyyuan · 2022 年11 月 11 日 12:29

逻辑导入，控制并发的参数是 region-concurrency

近墨者zyl · 2022 年11 月 12 日 01:36

region-concurrency 这个参数确实控制的是并发，但是最重要的是与内存有必然关系，默认一个线程分配2GB内存，所以 region-concurrency的value值乘以 2GB，最好控制在服务器可用内存的70%以下，可以有效的防止OOM

alfred · 2022 年11 月 13 日 15:04

应该没有SQL并发控制的直接参数

愚者之眷 · 2022 年11 月 15 日 08:07

可以

system · 2023 年1 月 14 日 08:07

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。