为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【 TiDB  使用环境】tidb 5.0.0版本
集群信息详见下图:
【概述】场景+问题概述
目前导入一个5亿数据记录的表,4个tiflash节点,1个副本,tiflash同步完成后,进程一直不断重启,请问如何排查该问题??
目前修改了tiflash的内存限制,reload tiflash后还是没有解决
【背景】做过哪些操作
【现象】业务和数据库现象
另外,tiflashmain进程不断重启后,服务器磁盘IO异常高,如下图
重启后,进程大概持续2-3分钟。
【业务影响】
【TiDB 版本】
【附件】
- 
TiUP Cluster Display 信息 
- 
TiUP Cluster Edit Config 信息 
- 
TiDB- Overview 监控 
若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。
             
            
              
              
              3 个赞
            
                
           
          
            
              
                懂的都懂
                (wangtianyi)
              
              
                  
                  
              2
              
             
            
              tiflash err log 和 tiflash log 提供一下,看一下内存的监控有没有 oom
             
            
              
              
              4 个赞
            
           
          
          
            
            
              目前我4个tiflash节点服务器内存已经加大到32G,但tiflash还是发生OOM
             
            
              
              
              2 个赞
            
           
          
            
              
                懂的都懂
                (wangtianyi)
              
              
                  
                  
              7
              
             
            
              您有拼宽表的行为吗?
可以考虑一下调小下面几个参数
profiles.default.dt_segment_limit_rows = 500000
profiles.default.dt_segment_delta_limit_rows = 40000
profiles.default.dt_segment_force_merge_delta_deletes = 5
profiles.default.dt_segment_force_merge_delta_rows = 500000
profiles.default.dt_segment_delta_cache_limit_rows = 1000
profiles.default.dt_segment_delta_small_pack_rows = 128
             
            
              
              
              1 个赞
            
           
          
            
            
              目前tiflash里面就一个表,是宽表,能解释下几个参数的作用么?我看官方文档里面都没有这几个参数,按你给出的值减小一半设置还是会OOM
             
            
              
              
              1 个赞
            
           
          
            
            
              最新OOM后日志如下:
tiflash.log (1.5 MB) tiflash_error.log (542 字节)
             
            
              
              
              1 个赞
            
           
          
            
              
                spc_monkey
                (carry@pingcap.com)
              
              
                  
                  
              11
              
             
            
              问一下,这个问题解决了吗,有没有参考其他 类似帖子的解决办法
             
            
              
              
              1 个赞
            
           
          
            
              
                spc_monkey
                (carry@pingcap.com)
              
              
                  
                  
              13
              
             
            
              额,好吧,
1、tiflash oom 的问题,在后续版本是在持续优化中,可以尝试一下(不知道你 oom 的原因,不敢确定)
2、你 tiflash 的日志,有点少,可以提供包含 oom时间 及 启动前时间的日志
             
            
              
              
              
            
           
          
            
              
                system
                (system)
                  关闭
              
              
                  
                  
              14
              
             
            
              此话题已在最后回复的 1 分钟后被自动关闭。不再允许新回复。