Information schema is out of date: schema failed to update in 1lease, please make sure TiDB can connect to TikV

[AeolusX]

【 TiDB 使用环境】生产环境
【 TiDB 版本】V5.2.1
【复现路径】每天做更新的
【遇到的问题：问题现象及影响】9点为临界点，汇总前一天9点到当前时间，早上数据量都很大，写入tidb非常慢，会卡住，数据量在10分钟插入400w数据
【资源配置】6PD、6TIDB、96Tikv、48Tiflash；硬件配置都是64 core、512G内存；6块ssd固态硬盘，每个tikv实例对应一块ssd硬盘；

集群一共24台服务器
【附件：

请教下各位老师，目前针对这种问题有没有优化解决方案呢？

[tidb菜鸟一只 (小菜一颗)]

pd和tidb是在一个机器上吗？pd有必要6个节点吗？3个不就行。。。。另外同一节点上的多个tikv都经过numa做资源隔离了吗？

[AeolusX]

pd和tidb是在一个机器上，同一个机器上的tikv没有做numa资源隔离

[Hacker007]

你看下io是不是满的

[像风一样的男子]

看起来insert的qps不是很高啊 磁盘io服务器cpu 内存都正常吗？

[AeolusX]

最高磁盘可以达到4k io/s

[像风一样的男子]

iops也不算很高 感觉是热点写入问题

[大飞哥online (大飞哥)]

1、监控排查是哪台的tikv的磁盘 I/O 高
2、再看看，是否I/O瓶颈和是不是热点写入

[cassblanca]

找到另一位用户同样的问题 分析是TIKV压力过大 Cause: java.sql.SQLException: Information schema is out of date: schema failed to update in 1 lease, please make sure TiDB can connect to TiKV - TiDB 技术问题 - TiDB 的问答社区 (asktug.com) 根据你的描述 也可能是同一时间集中写入压力太大 有热点问题 从而引发的