Flume可以作为ETL工具吗?

Flume只能进行简单ETL的清洗,去除不完整的Json串。
真正的Etl还是要在数仓中(如使用SQL的方式)去完成,在数仓中主要进行的是 去除空值,重复,丢失数据的清洗。
二者可以配合使用降低数仓的计算压力。

你可能感兴趣的:(大数据,json,flume)