DM进行数据复制的时候,在grafana监控页面上显示no data points,且task、source均没有值

为提高效率,请提供以下信息,问题描述清晰能够更快得到解决:
【 TiDB 使用环境】
TiDB v5.0.2
DM v5.4.0


【概述】 场景 + 问题概述
用DM进行数据复制时,查看task的任务状态正常,且数据能正常同步。但是监控界面没有数据显示
【备份和数据迁移策略逻辑】
DM创建了一个task,与一个worker绑定
【背景】 做过哪些操作

【现象】 业务和数据库现象
DM监控界面无数据显示,task、source都没有参数可选。但是在prometheus上是能看到数据传输的,只不过在无法显示


【问题】 当前遇到的问题
监控界面无数据,prometheus有数据传输

【业务影响】

【TiDB 版本】
TiDB v5.0.2
DM v5.4.0
【附件】

  • 相关日志、配置文件、Grafana 监控(https://metricstool.pingcap.com/)
  • TiUP Cluster Display 信息
  • TiUP CLuster Edit config 信息
  • TiDB-Overview 监控
  • 对应模块的 Grafana 监控(如有 BR、TiDB-binlog、TiCDC 等)
  • 对应模块日志(包含问题前后 1 小时日志)

若提问为性能优化、故障排查类问题,请下载脚本运行。终端输出的打印结果,请务必全选并复制粘贴上传。

补上DM集群架构信息:

检查下 Grafana Datasource 有没有配置对

这个该如何去检查?

https://docs.pingcap.com/zh/tidb-in-kubernetes/stable/aggregate-multiple-cluster-monitor-data#配置-grafana


看着好像是没问题

Save & Test 检查是不是 working


是working状态的

监控面板上有没有选择 DataSource

@萍萍723

DM 从 V5.30 版本开始对 grafana 的要求的最低版本是 7.5,但是 tidb v5.0.2 的集群内内置的 grafana 版本还是 6.x。这个版本不一致的问题会在之后进行跟进和修复

现在比较好的办法是:

  1. 手动部署一台版本大于等于 7.5 的 grafana 实例
  2. 添加数据源为当前 TiDB 集群的 promtheus
  3. 导入 v5.4.0版本 DM 的监控报表文件, 标准版本专业版本

标准版和专业版有什么区别

专业版本的指标会更多一些,更有利于排查性能瓶颈

该主题在最后一个回复创建后60天后自动关闭。不再允许新的回复。