tikv aborts txn: Value with size 5080652 exceeded ValueLogFileSize (4194304).

[Johnpan]

dm集群版本v6.1.0
TiDB版本 5.4.0

dm在loader阶段的时候报错
“Message”: "tikv aborts txn: Value with size 5080652 exceeded ValueLogFileSize (4194304).

【 TiDB 使用环境】生产\测试环境\ POC
【 TiDB 版本】
【遇到的问题】
【复现路径】做过哪些操作出现的问题
【问题现象及影响】
【附件】

• 相关日志、配置文件、Grafana 监控（https://metricstool.pingcap.com/)
• TiUP Cluster Display 信息
• TiUP CLuster Edit config 信息
• TiDB-Overview 监控
• 对应模块的 Grafana 监控（如有 BR、TiDB-binlog、TiCDC 等）
• 对应模块日志（包含问题前后 1 小时日志）

---

若提问为性能优化、故障排查类问题，请下载脚本运行。终端输出的打印结果，请务必全选并复制粘贴上传。

[xfworld (魔幻之翼)]

已知的 Bug，不支持 tidb 的 Entity Size 的配置参数

https://github.com/pingcap/tiflow/issues/6161#issuecomment-1173427105

建议是拆分任务，参考下面的帖子

tidb-v6.1 dm同步报错

【 TiDB 使用环境】POC` 【 TiDB 版本】tidb 6.1 【遇到的问题】 【复现路径】关闭dm 【问题现象及影响】dm无法正常同步上游的数据 tidb dm 报错日志如下 [2022/07/11 15:52:04.215 +08:00] [INFO] [source_worker.go:630] [“OperateSubTask start”] [component=“…

[tidb狂热爱好者]

自定义配置了

[Johnpan]

咋配置呢，配置什么，求指导

[Johnpan]

他这个报错和我的报错也不一样啊，我的是：
“Message”: "tikv aborts txn: Value with size 5080652 exceeded ValueLogFileSize (4194304).
肯定是参数限制了，但是不知道修改哪个参数

[Johnpan]

ValueLogFileSize (4194304).
我在官网里面就没有搜到默认值是4194304的参数

[xfworld (魔幻之翼)]

都说了已知 BUG 了…

[Johnpan]

我现在是800张MySQL分表合并到TiDB的9张表，我把任务拆分一下试试。