用lightning 导出到tidb 异常信息 "msg":"retrying of unary invoker failed" 长时间重试多次才能完成

TiDBer_卑微打工rer · 2023 年11 月 14 日 08:42

【 TiDB 使用环境】生产环境 /测试/ Poc
【 TiDB 版本】v7.1.0
【复现路径】做过哪些操作出现的问题
【遇到的问题：问题现象及影响】从hdfs上get parquet文件导入到tidb,kv导入已经结束,但总是retry 没有明显的报错,最终也会成功. 求大佬指点指点…
【资源配置】
【附件：截图/日志/监控】

Fly-bird · 2023 年11 月 14 日 08:45

查询数据库失败了，有可能是连接问题

TiDBer_卑微打工rer · 2023 年11 月 14 日 09:18

如果本地磁盘的配置比较低的话,会导致这种情况出现吗?

log里的warn

Fly-bird · 2023 年11 月 14 日 10:17

磁盘要求最低是ssd，如果配置低，对写入是有影响的

大飞哥online · 2023 年11 月 14 日 11:42

会的，磁盘数据处理不过来，任务就堆积了，就会超时

xfworld · 2023 年11 月 15 日 01:22

查下 PD 的日志，看起来是处理不了，直接挂死了

TiDBer_卑微打工rer · 2023 年11 月 15 日 02:26

磁盘一直是打满的,已经申请换盘了试一下先

TiDBer_卑微打工rer · 2023 年11 月 15 日 02:29

一会儿看一下,谢谢

大飞哥online · 2023 年11 月 15 日 12:55

恩呢，磁盘性能搞起来