【嘉宾介绍】TiDB x Flink Meetup 专场7.10 北京站

TiDB x Flink Meetup 专场7.10 北京站——嘉宾及议题介绍

《JFlink on TiDB——便捷可靠的实时数据业务支撑》

林佳

网易互娱技术中心实时开发工程师

Apache Flink Contributor

【嘉宾简介】

林佳,网易互娱计费数据中心实时业务负责人,实时开发框架 JFlink-SDK 和实时业务平台 JFlink 的主程。

【演讲简介】

近几年的实时计算领域,Flink 已经成为了最热门的开源框架;TiDB 便捷而可靠的 HTAP 融合型分布式特性使其在数据中心业务中被广泛应用。本次分享将从数据中心的计算案例出发,结合数据中心实时框架 JFlink-SDK 的设计哲学和对 TiDB 的使用方式,讨论如何实现在实际业务场景下准确稳定的实时计算业务。

《Flink + TiDB,体验实时数仓之美》

王天宜

TiDB 社区部门 架构师

【嘉宾简介】

王天宜,TiDB 社区部门架构师。曾就职于 Fidelity Investment,Softbank Investment,拥有丰富的数据库高可用方案设计经验,对于对 TiDB、Oracle、PostgreSQL、MySQL等数据库的高可用架构与数据库生态有深入研究。

【演讲简介】

实时数仓的进化历程- lambada 架构

  • Kappa 架构

  • 目前实时数仓的基本技术栈架构

TiDB + Flink 搭建实时数仓的数据链路

  • TiDB 的基础架构与扩展性

  • TiDB + Flink 实时数仓的架构

TiDB + Flink 的最佳实践

《TiDB x Flink 的端到端实时计算》

孙晓光

知乎基础研发架构师;TiDB 社区 TOC 主席

TiKV Maintainer

【嘉宾简介】

孙晓光,知乎基础研发团队架构师,长期从事分布式系统相关研发工作关注云原生技术。

【演讲简介】

Flink 被普遍用于高实时性场景下的实时计算,而 TiDB 则被广泛应用于大数据量级下 OLTP 交易场景。TiDB 优秀的横向扩展能力使其成为 Flink 实时计算任务一个理想的下游数据库存储,更好的满足高吞吐低时延的实时计算结果存储需求。而 Flink 极强的扩展能力也能够为持续高吞吐写入的 TiDB 集群提供充足的计算能力,为大流量数据计算的实时性提供充分的保障。在缺乏原生 TiDB Flink 流式计算能力的过去,用户需要采用迂回的手段利用针对 MySQL 设计的工具实现 TiDB 数据的流或批计算。这不但增加了学习上的额外负担,还难以充分利用 TiDB 独有的架构特点提升系统的整体效率。在知乎整体在线数据库系统向 TiDB 过渡的过程中,我们迫切的感受到 TiDB x Flink 原生批流一体解决方案的重要性。本次分享将介绍知乎在 TiDB x Flink 批流一体方面的部分工作,并以实际业务为例介绍如何充分利用两者的特点完成端对端实时计算的闭环交付。

《Flink SQL 在奇虎 360的 实践》

张超明

360大数据平台研发工程师

【嘉宾简介】

张超明,360 大数据平台研发工程师。热爱技术,对大数据相关技术非常感兴趣,尤其是对于实时计算的原理和发展非常着迷。目前就职于奇虎 360 系统部,参与实时计算相关技术在司内的落地和推广,负责 Flink SQL 的产品化和优化。

【演讲简介】

随着公司的搜索、 金融、广告、游戏等业务的不断发展,通过实时计算推进业务价值的更快迭代成为了迫切的需求,Flink 作为目前在司内主推的实时计算引擎,在司内也愈加广泛地被使用。为了加快开发效率,降低开发人员的学习成本,我们积极鼓励用户使用 Flink SQL 进行作业开发。

本次分享将围绕 Flink SQL 在奇虎 360 的产品化落地过程,分享我们在 Flink SQL 上的一些感悟、实践与改进。

《详解 Flink-CDC》

image

徐榜江

Apache Flink Contributor

阿里巴巴高级开发工程师

【讲师简介】

徐榜江(雪尽),阿里巴巴高级开发工程师,专注于 Flink SQL 引擎开发。

【演讲简介】

如何将数据库中的数据接入数据仓库/数据湖是数仓建设需要考虑的关键一环。本次分享,对比 传统数据同步方案 和 Flink-CDC 数据同步方案的优缺点,分析 Flink-CDC 架构的优势,同时分享Flink-CDC 2.0 设计方案, 详细解读无锁设计和全量阶段并发设计。