随着大数据时代的来临,数据的处理对企业的技术团队挑战越来越高,数据在同步时能否支持各种数据源?应对海量的增量数据实例如何拥有更好的性能?数据聚合平台是否能开箱即用/方便二次开发?应对数据采集多场景和工具的是否具备良好的拓展性等,都是数据开发工程师关心的切实痛点问题,而对于企业来说,海量数据如何更好更快的分析应用,数据如何驱动业务更好的发展,成为相当重要的一环。
而庞大的数据增量以及业务多变的数据分析需求,对于企业以及工程师都是极大的挑战,在这样迫切的需求下,数据集成及数据分析就显得尤为重要。
如今,我们也可以看到,大数据领域的开源项目繁荣带来了强大的大数据平台,而对于负责数据工作流的开发者而言,平台的技术门槛是另一种挑战。如果能将数据的处理能力统合,并不断地优化和迭代,数据的生产力和处理效率将得到大幅度的提升。
基于此,7月24日 14:00,Apache Doris和Apache SeaTunnel(incubating) 两个社区强强联手,将在本月联合举办线上 Meetup 活动。本次活动为「数据集成及数据分析开发实践」专场,我们将围绕 SeaTunnel 和 Doris 进行开发实践分享。这些优秀的项目,相互结合将会碰撞出何种火花,我们一起拭目以待!
值得一提的是, Apache Doris 从 Apache 软件基金会(ASF)毕业后,这次联合技术活动是 Doris 的毕业首秀,值得期待!
本次 Meetup 我们邀请到了来自小米、新浪微博、白鲸开源、SelectDB 等企业的 5 位技术大咖,针对不同场景应用进行深度解读和实践经验分享!
基于 SeaTunnel 接入 Doris 的优化与实践
Apache SeaTunnel 新 Api 连接器开发实践、Apache SeaTunnel-server 的价值、现状和未来展望
Apache Doris 基于不同场景下的应用与实践经验
和来自小米、新浪微博、SelectDB、白鲸开源等企业的技术大咖线上“零距离”交流机会
7月线上直播报名通道已开启,赶快预约吧!
时间:2022-7-24 14:00-17:20
形式:线上直播
直播链接:https://live.csdn.net/room/wl5875/LbPMeRdr
吴迪
SelectDB 大数据开发工程师
Apache Doris Committer
演讲时间:14:00-14:30
演讲题目: 基于 SeaTunnel 接入 Doris 的优化与实践
演讲概要:目前 SeaTunnel Doris Sink 的现状,以及针对存在的问题做的一些优化及效果
刘黎
白鲸开源高级工程师
Apache SeaTunnel(Incubating)
Arrow-DataFusion Contributor
演讲时间:14:30-15:10
演讲题目: Apache SeaTunnel 新Api连接器开发流程演示
演讲概要: 如何基于 SeaTunnel 新 Api 开发一个连接器,解读当前新 Api 下有哪些可用连接器
抽奖环节:15:10-15:15 福利抽奖
魏祚
小米集团引擎研发工程师
Apache Doris PMC
演讲时间:15:15-15:55
演讲题目:Apache Doris 在小米数据场景的落地实践与优化
演讲概要:自从 2019 年 9 月小米集团首次引入 Apache Doris 以来, Apache Doris 已经在小米集团得到了广泛的使用,目前已经服务了小米数十个业务,并且已经在小米内部形成了一套以 Apache Doris 为核心的数据生态。在小米的使用场景中,我们对 Apache Doris 也完成了多项功能开发和性能优化。本次演讲会对 Apache Doris 在小米数据场景的落地实践进行分享,同时也会分享一些小米对 Apache Doris 的优化。
狄杰
SeaTunnel 社区神秘的开源贡献者
演讲时间:15:55-16:35
演讲题目: Apache Seatunnel 的服务化之路
演讲概要:主要围绕 seatunnel-server 模块,阐述为什么要做这件事以及能够给用户、给社区带来什么样的价值,以及我们目前的进度和未来发展。
抽奖环节:16:35-16:40 福利抽奖
袁小志
新浪微博 数据中台工程师
演讲时间:16:40-14:30
演讲题目:Apache Doris 在建设 DMP 架构中的应用与实践
演讲概要:主要方向为广告业务多维度报表产出以及用户的画像多级标签分析
7月 24 日 14:00,Apache SeaTunnel (Incubating) 联合Apache Doris 7月Meetup期待您的到来,我们不见不散!
关于 Apache SeaTunnel(Incubating)
Apache SeaTunnel(Incubating) 是一个分布式、高性能、易扩展、用于海量数据(离线&实时)同步和转化的数据集成平台。2021 年 12 月 9 日,SeaTunnel 正式通过世界顶级开源组织 Apache 软件基金会的投票决议,以全票通过的优秀表现正式成为 Apache 孵化器项目!
关于 Apache Doris
Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。
2022 年 6 月 16 日,Apache Doris 成功从 Apache 孵化器毕业,正式成为顶级项目。目前 Apache Doris 社区已经聚集了 340 余位贡献者,社区用户人数超过 5000+ 。在全球范围内获得超过 500+ 家企业的应用,在中国市值或估值排行前 50 的互联网公司中,有超过 80% 的公司长期使用 Apache Doris,同时在一些传统行业如金融、能源、制造、电信等领域也有着丰富的应用。
更多直播互动,参与本期即有机会获得社区小礼品
SeaTunnel,来,和社区一同成长!
Apache SeaTunnel(Incubating) 是一个分布式、高性能、易扩展、用于海量数据(离线&实时)同步和转化的数据集成平台。
仓库地址:
https://github.com/apache/incubator-seatunnel
网址:
https://seatunnel.apache.org/
Proposal:
https://cwiki.apache.org/confluence/display/INCUBATOR/SeaTunnelProposal
Apache SeaTunnel(Incubating) 2.1.0 下载地址:
https://seatunnel.apache.org/download
衷心欢迎更多人加入!
能够进入 Apache 孵化器,SeaTunnel(原 Waterdrop) 新的路程才刚刚开始,但社区的发展壮大需要更多人的加入。我们相信,在「Community Over Code」(社区大于代码)、「Open and Cooperation」(开放协作)、「Meritocracy」(精英管理)、以及「多样性与共识决策」等 The Apache Way 的指引下,我们将迎来更加多元化和包容的社区生态,共建开源精神带来的技术进步!
我们诚邀各位有志于让本土开源立足全球的伙伴加入 SeaTunnel 贡献者大家庭,一起共建开源!
提交问题和建议:
https://github.com/apache/incubator-seatunnel/issues
贡献代码:
https://github.com/apache/incubator-seatunnel/pulls
订阅社区开发邮件列表 :
开发邮件列表:
加入 Slack:
https://join.slack.com/t/apacheseatunnel/shared_invite/zt-123jmewxe-RjB_DW3M3gV~xL91pZ0oVQ
关注 Twitter:
https://twitter.com/ASFSeaTunnel
SeaTunnelApache SeaTunnel(Incubating)是一个分布式、高性能、易扩展、用于海量数据(离线&实时)同步和转化的数据集成平台。