AskTUG Weekly (20190826-20190901)

问答

Q1: 【Tools】使用 Mydumper 备份 MySQL,并将 Chunk 设置为 64m 大小,导入过程中报错

是什么原因呢?详情查看:Mydumper数据迁移时报错

Q2: 【Tools】使用 TiDB 官方工具:Mydumper 导出,Loader 导入工具,进行导入数据时,报错如下: Error 9001: PD server timeout,是什么原因呢?详情查看:Mydumper 导出,Loader 导入,进行导入数据时报错

Q3: 【SQL】INFORMATION_SCHEMA.SLOW_QUERY。慢日志里的 query 语句太长,有什么办法看到完整 SQL 的吗?详情查看:怎么查看慢日志完整 SQL

Q4: 【TiDB】【TiSpark】我们计划重新设计数仓结构,在考虑数据组件的选择,目前考虑了三种: 1.Impala+Kudu 2.HBase+Phoenix 3.TiDB+TiSpark, 请问:TiDB 于 HBase + Phoenix 和 Kudu + Impala 的性能对比如何?

Q5:【TiSpark】 直接使用 MySQL 客户端数据能实时查询更新后数据,使用 TiSpark 查询延迟10-20s 才能查到。尝试 saveMode = “append” 模式,使用 TiSparksql 也能实时查到更新后的数据。详情查看:TiSpark 使用 overwrite 写入数据后通过 TiSparksql 读取存在延迟

Q6: 【TiDB】TiDB 版本:2.1.10, update 语句执行速度很慢,不存在大事务提交。请问 TiDB 里面是有什么参数配置吗?还是 TiDB 本身是有限制,又或者是当前版本对于 TiDB 优化的问题?详情查看:TiDB 的 update 语句执行速度慢

Q7: 【TiDB】TiDB 3.0.2 PD 扩容时报错 [error] rafthttp: [request sent was ignored (cluster ID mismatch: remote[…,是什么原因呢?详情查看:TiDB 3.0.2 PD 扩容时报错

Q8: 【TiDB】升级到 TiDB 3.0.2 以后打开 Grafana 查看 Test-Cluster-TiKV 组件发现没有显示监控数据。详情查看:TiDB 3.0.2 Cluster-TiKV 组件不显示监控数据

Q9: 【TiDB】TiDB 删除数据出现 transaction is too large,这个问题怎么解决,根据配置设置了还是没用。详情查看:TiDB 删除数据出现 transaction is too large

Q10: 【TiDB】TiDB 用作数据仓库的话,是需要考虑批处理作业可能产生的大量结果数据写入的。 对这种情况有什么优化呢?详情查看:大批量数据写入有什么优化

文章

易果 TiDB 的使用及数据中台的思考:易果集团的实时数仓其实很早就已经存在了,随着业务的增长,在易果集团离线的部分已经由SqlServer切换成了Hadoop,实时的部分也需要一套能够满足未来业务增长的系统,根据业务和技术方面的综合选择,我们最终选定了TiDB+TiSpark的方案。

TiDB 拓扑查询工具 qtidb:58集团自研的拓扑查询工具 qtidb, 可根据元信息,展示某集群的拓扑情况;中控机可以快速登录具体tidb实例;展示集群的其他信息。

TiDB 监控实现——存活监控:随着TiDB集群的数量的发展,需要监控TiDB集群的存活情况。公司监控使用zabbix,需要将TiDB的监控接入进去,需要实现一键添加、删除集群监控,实现自动化。

周末了,一起来看看 TiDB 的 AP 能力:大多数用户使用 TiDB 是在 TP 场景下使用,北京衡石科技给大家带来了新的案例:TiDB 在 AP 场景的测试结果。

活动回顾

北京 TUG 第一期线下活动 “全面了解转转的 TiDB 实践” 活动回顾:北京 TUG 的第一次线下活动于 8 月 25 日在转转成功举办。本次活动的主题是“全面了解转转的 TiDB实践”,活动邀请了来自转转的首席架构师孙玄老师、数据库负责人冀浩东老师以及架构部负责人陈东老师,他们从架构、运维、业务开发全方位解读了转转从接触到深度使用,再到“All in” 的 NewSQL 探索及实践经验。

TUG 华南区第一期线下活动“走进随手科技”精彩回顾:TUG 华南区于上周日 (8月25日)举办了成立以来的首次线下活动:走进随手科技。来自随手科技的大数据工程师 & TUG 大使韩超,微众银行的高级 DBA 工程师 & TUG 大使黄蔚,以及360金融的数据小组负责人 & TUG 大使黄龙给大家分享了各自团队使用 TiDB 的经验,让到场小伙伴们收获颇丰。

4赞

学习了,感谢小丸子的总结 :+1:

还有周报总结,:+1:

总结的很好,学习了…

赞,:+1: