Waterdrop入门

什么是Waterdrop

一个简单易用,高性能,能够应对海量数据的数据处理产品
海量数据ETL
海量数据聚合
多源数据处理

为什么需要Waterdrop

  1. 分布式数据处理入门易,精通难
  2. 太多Spark/Flink重复代码,重复逻辑可以抽象和简化
  3. 海量数据处理挑战多,经验少

Waterdrop工作流程

数据源输入
数据反序列化
数据处理
数据序列化
结果输出
Waterdrop入门_第1张图片

##样例代码

Waterdrop入门_第2张图片

参考文档
http://slides.com/garyelephant/waterdrop/fullscreen?token=GKrQoxJi#/2
https://interestinglab.github.io/waterdrop-docs/#/zh-cn/case_study/
https://elasticsearch.cn/slides/127#page=13

你可能感兴趣的:(Waterdrop入门)