“暴风数据平台简介”总结

概述:

此分享是关于"暴风数据平台"的总体架构,暴风的数据平台基于Hadoop生态系。

技术点:

hadoop
hive
pig
hbase
fuse
rsync

图解:


“暴风数据平台简介”总结_第1张图片

 

总结:

数据服务器负责采集数据然后以某种粒度进行rysnc到数据汇聚服务器上然后拷贝到hdfs上去最终基于MR进行处理。

 

其他:

资源来自网上,如有侵权望告知!

你可能感兴趣的:(总结)