Flink,近年来广受欢迎,是最受认可的大数据计算引擎之一;TiDB 作为开源的 NewSQL 数据库也以其优秀的横向扩展能力和高可用特点,颇受业界的好评。那么当 Flink 遇上 TiDB,会迸发出怎样的火花呢?
Apache Flink 社区 Meetup 北京站又来啦
7月10日 | 北京 | 线下
Flink x TiDB 专场
本场 Meetup 将由 Flink 社区与 TiDB 社区合办。一如既往,我们邀请了各行业的技术大牛,来自阿里巴巴、TiDB、360、知乎、网易的 5 位技术专家将围绕 Flink 和 TiDB,分享如何实现准确稳定的实时计算业务、如何搭建实时数仓数据链路的最佳实践、如何利用两者的特点完成端对端实时计算的闭环交付,以及 Flink SQL 和 Flink-CDC 架构的感悟与实践等。
■ 活动亮点
超多实用干货,Flink + TiDB 的结合能擦出怎样的火花,且看各位技术专家聚焦实时数据业务支撑、实时数仓、端到端实时计算等场景,用理论结合实践解析 Flink + TiDB 在各场景的应用。
活动形式多样化,线下线上同步开启,同城可参与线下 Meetup 面对面交流,异地也可在线观看直播,精彩内容不错过;
丰富周边等你拿,报名参加就有机会获得超多 Flink 社区定制的精美周边!
特别鸣谢 360 提供场地
■ 活动议程
▼ 立即报名 ▼
Apache Flink x TiDB Meetup · 北京站
http://hdxu.cn/kF2ua
一、 嘉宾及议题介绍
议题一:《JFlink on TiDB——便捷可靠的实时数据业务支撑》
林佳|网易互娱技术中心实时开发工程师,Apache Flink Contributor
【嘉宾简介】
林佳,网易互娱计费数据中心实时业务负责人,实时开发框架 JFlink-SDK 和实时业务平台 JFlink 的主程。
【演讲简介】
近几年的实时计算领域,Flink 已经成为了最热门的开源框架;TiDB 便捷而可靠的 HTAP 融合型分布式特性使其在数据中心业务中被广泛应用。本次分享将从数据中心的计算案例出发,结合数据中心实时框架 JFlink-SDK 的设计哲学和对 TiDB 的使用方式,讨论如何实现在实际业务场景下准确稳定的实时计算业务。
议题二:《Flink + TiDB,体验实时数仓之美》
王天宜|TiDB 社区部门 架构师
【嘉宾简介】
王天宜,TiDB 社区部门架构师。曾就职于 Fidelity Investment,Softbank Investment,拥有丰富的数据库高可用方案设计经验,对于对 TiDB、Oracle、PostgreSQL、MySQL等数据库的高可用架构与数据库生态有深入研究。
【演讲简介】
实时数仓的进化历程- lambada 架构
- Kappa 架构
- 目前实时数仓的基本技术栈架构
TiDB + Flink 搭建实时数仓的数据链路 - TiDB 的基础架构与扩展性
- TiDB + Flink 实时数仓的架构
TiDB + Flink 的最佳实践
议题三:《TiDB x Flink 的端到端实时计算》
孙晓光|知乎基础研发架构师;TiDB 社区 TOC 主席,TiKV Maintainer
【嘉宾简介】
孙晓光,知乎基础研发团队架构师,长期从事分布式系统相关研发工作关注云原生技术。
【演讲简介】
Flink 被普遍用于高实时性场景下的实时计算,而 TiDB 则被广泛应用于大数据量级下 OLTP 交易场景。TiDB 优秀的横向扩展能力使其成为 Flink 实时计算任务一个理想的下游数据库存储,更好的满足高吞吐低时延的实时计算结果存储需求。而 Flink 极强的扩展能力也能够为持续高吞吐写入的 TiDB 集群提供充足的计算能力,为大流量数据计算的实时性提供充分的保障。在缺乏原生 TiDB Flink 流式计算能力的过去,用户需要采用迂回的手段利用针对 MySQL 设计的工具实现 TiDB 数据的流或批计算。这不但增加了学习上的额外负担,还难以充分利用 TiDB 独有的架构特点提升系统的整体效率。在知乎整体在线数据库系统向 TiDB 过渡的过程中,我们迫切的感受到 TiDB x Flink 原生批流一体解决方案的重要性。本次分享将介绍知乎在 TiDB x Flink 批流一体方面的部分工作,并以实际业务为例介绍如何充分利用两者的特点完成端对端实时计算的闭环交付。
议题四:《Flink SQL 在 360 的实践》
张超明|Apache Hudi Contributor,360大数据平台研发工程师
【嘉宾简介】
张超明,360 大数据平台研发工程师。热爱技术,对大数据相关技术非常感兴趣,尤其是对于实时计算的原理和发展非常着迷。目前就职于 360 系统部,参与实时计算相关技术在司内的落地和推广,负责 Flink SQL 的产品化和优化。
【演讲简介】
随着公司的搜索、 金融、广告、游戏等业务的不断发展,通过实时计算推进业务价值的更快迭代成为了迫切的需求,Flink 作为目前在司内主推的实时计算引擎,在司内也愈加广泛地被使用。为了加快开发效率,降低开发人员的学习成本,我们积极鼓励用户使用 Flink SQL 进行作业开发。
本次分享将围绕 Flink SQL 在 360 的产品化落地过程,分享我们在 Flink SQL 上的一些感悟、实践与改进。
议题五:《详解 Flink-CDC》
徐榜江|Apache Flink Contributor,阿里巴巴高级开发工程师
【讲师简介】
徐榜江(雪尽),阿里巴巴高级开发工程师,专注于 Flink SQL 引擎开发。
【演讲简介】
如何将数据库中的数据接入数据仓库/数据湖是数仓建设需要考虑的关键一环。本次分享,对比 传统数据同步方案 和 Flink-CDC 数据同步方案的优缺点,分析 Flink-CDC 架构的优势,同时分享Flink-CDC 2.0 设计方案, 详细解读无锁设计和全量阶段并发设计。
二、活动报名
■ 活动详情
时间:7 月 10 日 13:30-17:30
地点:北京市朝阳区酒仙桥路 6 号院 2 号楼 360 大厦 A 座发布厅
报名链接:
https://1712399719478.huodong...
直播观看:https://developer.aliyun.com/...
线下场地位置有限,先到先得哦!更多 Flink 相关技术问题,可查看
Flink 中文学习网站:https://flink-learning.org.cn/