TIDB tiflash节点查询报错

🪐 TiDB 技术问题
1

【TiDB 使用环境】生产环境
【TiDB 版本】v7.1.2
【操作系统】
【部署方式】虚拟机部署
【集群数据量】
【集群节点数】
【问题复现路径】从今天凌晨开始，集群执行查询任务开始报错
【遇到的问题：问题现象及影响】查看集群状态，各个节点状态都正常，但是查看tiflash、tikv节点相关日志，均有报错。目前tikv写入、查询都正常，tiflash查询报错。
【资源配置】进入到 TiDB Dashboard -集群信息 (Cluster Info) -主机(Hosts) 截图此页面
【复制黏贴 ERROR 报错的日志】
【其他附件：截图/日志/监控】
集群状态：

image
image1416×438 11.8 KB

tiflash日志：
image
image1897×944 6.47 KB

tikv日志：
image
image1667×993 10.2 KB

tiflash查询报错：
7e9d1d5576d75eaeca9b91ac31931671
7e9d1d5576d75eaeca9b91ac319316711356×491 26 KB

2

:thinking:这里重置副本之后可以了。

还有可能是磁盘空间不足。

1 个赞
3

看了下应该不是磁盘的问题。查了下region id 都指向了一个大表，一会业务量下来了，试下重置副本~感谢大佬回复~！ :smiley:

4

看着是这个region有问题了，
image
重新初始化tiflash副本应该能解决

6

昨天把对应的大表初始化了，progress也变成1了。但是我看tikv和tiflash里还是有报错。帮忙给定位下吧~！
tikv日志：

image
image1691×601 7.66 KB

tiflash日志：
image
image1893×994 7.43 KB

7

grafana里看看集群负载情况，cpu、内存、io等是否负载过高，网络是否正常。

8

首先仔细查看TiFlash和TiKV的日志文件，寻找任何异常或错误信息。重点关注错误发生的时间点以及相关的堆栈跟踪信息

9

嗯，来学习一下

10

重新执行报错的查询语句