br无法正常备份

[TiDBer_VtkBZH6I]

【 TiDB 使用环境】生产环境 /测试/ Poc
测试
【 TiDB 版本】
V5.0.1
【复现路径】做过哪些操作出现的问题
使用br备份至minio，中间多次hang住，使用kill -9，将备份进程杀掉。
【遇到的问题：问题现象及影响】
备份无法正常进行下去
【资源配置】
【附件：截图/日志/监控】

[xfworld (魔幻之翼)]

看日志信息，比较像是网络问题

[裤衩儿飞上天]

先看看你的随便找一台tikv，看看你的minio里能正常写数据进去吗？

[TiDBer_VtkBZH6I]

可用写进去，有数据，就是特别满，日志有报错。

[TiDBer_VtkBZH6I]

特别满

[TiDBer_VtkBZH6I]

有一个tikv节点之前离线过，没有处理，现在要备份数据，特别满，就将离线的节点重新启动了。

[TiDBer_VtkBZH6I]

[胡杨树旁]

看下边的日志信息，好像是说主锁？是不是tikv节点有问题？

[TiDBer_VtkBZH6I]

怎么查看tikv节点有问题？

[TiDBer_VtkBZH6I]

现在能成功备份一张单表，但是速度非常慢，15kb/s

[TiDBer_VtkBZH6I]

@胡杨树旁

的日志信息，好像是说主锁？

display是正常的

[TiDBer_VtkBZH6I]

[2023/04/24 11:26:26.970 +08:00] [ERROR] [endpoint.rs:763] [“backup region failed”] [err_code=KV:Unknown] [err=“Io(Custom { kind: Other, error: "failed to put object Error during dispatch: error trying to connect: tcp connect error: Connection timed out (os error 110)" })”] [end_key=74800000000000AC3C5F698000000000000002FB] [start_key=74800000000000AC3C5F69800000000000000200] [region=“id: 23910263 start_key: 74800000000000ACFF3C00000000000000F8 end_key: 74800000000000ACFF3E00000000000000F8 region_epoch { conf_ver: 8 version: 15099 } peers { id: 23910264 store_id: 1 } peers { id: 23910265 store_id: 7 } peers { id: 23910266 store_id: 94001 }”]
[2023/04/24 11:26:26.970 +08:00] [ERROR] [endpoint.rs:792] [“backup failed to send response”] [err_code=KV:Unknown] [err=“TrySendError { kind: Disconnected }”]

[TiDBer_VtkBZH6I]

可以正常备份了，之前因为ip冲突，集群服务链接上某一个tikv节点，无法正常备份，备份特别慢。为了让集群正常，在集群内设置了arp，集群恢复正常。但是备份还是缓慢，报错。单表可以备份成功，网速仅为15kb/s，从网速差的思路往下想，应该是跟minio出现问题，后来想到之前集群做了arp，minio未做，所以导致minio无法识别到kitv，将minio服务器做了arp，备份正常。