为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【TiDB 版本】
v4.0.10
【问题描述】
执行lightning加载tpcc50000仓数据后,analyze操作耗时较长。tpcc50000仓数据约3.5T,lightning加载任务总耗时141327s(39小时15分27秒),但是耗时的后面一半时间数据实际已经入库,后台show processlist是在做analyze操作。
如analyze统计tpcc的warehouse表,5W行数据,analyze执行8.6小时。
请帮忙确认这个lightning加载性能和加载后期的analyze性能是否正常,是否还有优化空间
另外在执行analyze的时间段,查看监控有大量的锁,analyze操作不是应该不锁表吗
3台服务器配置
50000仓数据加载的lightning日志及配置文件
load50000.zip (3.1 MB)
tidb-lightning.zip (5.6 MB)
load.toml (964 字节)
现在单跑analyze的耗时以及样例数据,是完全随机的数据,统计操作比较耗时吗
若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。