tikv aborts txn: Value with size 5080652 exceeded ValueLogFileSize (4194304).

dm集群版本v6.1.0
TiDB版本 5.4.0

dm在loader阶段的时候报错
“Message”: "tikv aborts txn: Value with size 5080652 exceeded ValueLogFileSize (4194304).

【 TiDB 使用环境】生产\测试环境\ POC
【 TiDB 版本】
【遇到的问题】
【复现路径】做过哪些操作出现的问题
【问题现象及影响】
【附件】

  • 相关日志、配置文件、Grafana 监控(https://metricstool.pingcap.com/)
  • TiUP Cluster Display 信息
  • TiUP CLuster Edit config 信息
  • TiDB-Overview 监控
  • 对应模块的 Grafana 监控(如有 BR、TiDB-binlog、TiCDC 等)
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

已知的 Bug,不支持 tidb 的 Entity Size 的配置参数

https://github.com/pingcap/tiflow/issues/6161#issuecomment-1173427105

建议是拆分任务,参考下面的帖子

自定义配置了

咋配置呢,配置什么,求指导

他这个报错和我的报错也不一样啊,我的是:
“Message”: "tikv aborts txn: Value with size 5080652 exceeded ValueLogFileSize (4194304).
肯定是参数限制了,但是不知道修改哪个参数

ValueLogFileSize (4194304).
我在官网里面就没有搜到默认值是4194304的参数

都说了已知 BUG 了… :rofl:

我现在是800张MySQL分表合并到TiDB的9张表,我把任务拆分一下试试。

此话题已在最后回复的 60 天后被自动关闭。不再允许新回复。