lightning local导入时经常oom

h5n1 · 2024 年4 月 22 日 07:21

版本 v7.1.2，# uname -a
Linux pd-152 4.19.90-23.6.v2101.ky10.aarch64 #1 SMP Wed Mar 17 14:45:17 CST 2021 aarch64 aarch64 aarch64 GNU/Linux
导入并发数从24降到了12
lightning主机可用内存

目前导入只剩这最后一张大表，表结构如下

dump文件大小：
8a805aca645ad627a7c04ee61282e20

配置文件：

dmesg.txt (149.3 KB)

3个并发都不行

Jolyne · 2024 年4 月 22 日 07:44

要不改个这个参数试试？

wakaka · 2024 年4 月 22 日 08:07

更换lightning版本试试

yiduoyunQ · 2024 年4 月 22 日 08:48

换成 csv 试试？

DBAER · 2024 年4 月 22 日 09:20

是不是其他资源抢占导致lightning 内存占比最高oom，写个脚本监控lightning 占用的实际内存

h5n1 · 2024 年4 月 22 日 12:47

应该是7.1.2这版有bug ，用了7.5.1版导入，顺便把集群升级了

h5n1 · 2024 年6 月 21 日 12:47

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。