架构上的些许积累

mongo同步mongo-connector数据到elasticsearch,而elasticsearch可以结合logstash、kibana、redis,做数据收集和展示,分词搜索

mysql通过canal实现准实时同步数据到hbase或者kafka,写client程序执行插入 http://blog.csdn.net/hackerwin7/article/details/39896173

storm将数据直接写到hdfs导致hdfs的客户端长时间打开,时间长了就容易出错KG-Camus定时将kafka数据拉到hdfs,而不是kafka推到hdfs

flume+kafka+spark streaming

酷狗音乐架构:
架构上的些许积累_第1张图片

你可能感兴趣的:(架构上的些许积累)