lightning导入时速率特别慢,一直在暂停调度操作;
两天一共上传的数据量如下
DC18服务器是tikv,也是lightning执行导入的服务器,内存一直很高,就把lightning的region 并发数那些都调低了,调高lightning进程隔段时间就会退出;
查看发现导入的集群空 region很多,将max-merge-region-keys max-merge-region-size调整后,lightning进程过一段时间就会触发pause 调度,空 region 数下降就会停止,再次查看该配置发现配置的参数就被清为0;
有几个问题想咨询下:
1.lightning进程会增加empty region数吗?
2.empty region count加大会影响导入速率吗?
3.目前这种情况是什么原因造成导入速率过慢?怎么加快导入速率?