大数据平台系统的关系

平台与大数据之间的关系?
平台:一套独立的产品
系统:某一个J2EE项目+某些大数据组件+ssm+redis:
那么大数据平台主要是做的什么,数据是从什么地放来的。

大数据平台系统的关系_第1张图片
现在我就来说明上面图片上的问题:
1,数据的来源,图片上已经展示了
2,数据丢失。当磁盘坏了,或者其他情况下引起数据的丢失我们应该怎么办?
3,清洗,当有些数据不是我们需要的就要清洗转换。
4,计算,分析,统计。将清洗转换之后,我们就要拿去有价值的数据,就需要经过数据的计算,将计算结果进行统计,然后分析。
5,效率,当数据量大的时,我们查询的速度就会变慢。
6,安全,监控。硬件总是不可靠的,大数据就会有节点监控等来保证运行的安全性。

你可能感兴趣的:(技术)