有个报表每天全量计算。先把前一天的数据清了。然后再插入,当前算出来的数据。每天全量算的话有千万条左右。每晚花了两个小时这样。
报表的结果数据有千万?还是千万数据计算出来报表结果,对报表结果数据每天清理在插入?你这个表先别加入tiflash,既然是算完的数据查询的话tikv就可以
这个数据量,不应该会有这个问题。
tiflash的日志能提供一份么,可能有助于解决问题。
按天维度统计的,10 几张表。每张总量在 500 w 到千万。
感谢哈。卸载了 tiflash。又重新安装。副本都搞成了一。目前跑了两次计算任务。资源看着还算正常。不知道 N 天后怎么样
之前都跑的好好的。每天数据增量也不多。也就几十万。跑了几个月后,就突然这样内存爆炸,然后再也起不来了。日志没有 error 。然后重新安装了 tiflash。日志没保存下来。
1 个赞
在观察看看吧
虚拟内存是否彻底关闭了,如果关闭了,可以考虑把vm.swappiness = 1 设置试试先能不能启动