大数据 云计算 hadoop的概念理解

作为一个懒人实在是不爱学习，然而不学习就要被淘汰，公司要求学习大数据相关知识，只能慢慢学习了，因为公司事务很多，本来7月份的时候已经开始学习，也写了一些操作的文章，但是中间耽搁了了好久到现在我回头看我自己写的文章竟然看不懂！！！

这我就不开心了，琢磨了一上午为什么？是时间太久忘记了？是我记忆力减退了？即便如此我也不能过了几个月跟没学一样吧？？

最后找到原因，当初没沉下心来好好理解，或者说理解不到位。只是忙着操作实践。导致最终一无所获。

所以打算一点点记录自己对一些概念的理解。会不定时更新，毕竟学的越多理解的也就不一样了！！闲话少说

首先 搞清楚2个概念大数据和云计算还有hadoop

1.首先说云计算，为啥先说云计算，我觉着这货的概念最大。

云计算我目前的理解：

云计算是从云服务器这个商业模式中升级而来的一个概念，目的是给用户提供原有的云服务器（也就是相当于硬件服务）的同时，提供大数据存储和大数据计算等架构服务。以前的云服务器只是给用户提供了基础的硬件服务，用户需要自己搭建自己的平台，运行自己的网站或者项目，而云计算，再提供硬件的基础上，提供平台软件服务（主要指分布式数据存储和分布式处理），甚至还有可能提供数据挖掘服务。由此而言其实云计算这个概念有一些片面，或许是为了突出计算吧，所以才叫这个名字。

我觉着叫云服务会更好一些。因为  硬件，软件，平台，计算，数据分析挖掘全部提供。牛逼

2.再来说说大数据 呐 ~大数据的概念我觉着就比云计算小一些。但是大数据不是从商业角度讲的 仅仅是从技术角度讲的。

实际上人存在在地球上，每一秒钟都在产生各种各样的数据，我们的大脑只是存储信息的一种形式（不稳定的数据库）。这个时候又要提到利益，那就是以前我们认为不是所有的数据都有价值，所以我们的大脑，我们做的软件项目都只存储我们觉得有价值的东西，但是随着时代的发展，我们发现，哦呦，这个很多很多无用的数据拿来分析一下可以得出一些很有趣的结果，甚至有一些结果价值巨大，比如说用前100年每一天的天气预测今年的天气，比如说用一个用户的生活习惯，分析出它的购买欲望，提前将可能被购买的获取顺路运输到此用户附近的仓库（有些事情想想就很可怕，因为习惯本身就是很可怕的一件事）。

由此出现了大数据，大数据实际上也就是海量数据的存储和计算，以及展示！！再也就没什么了好说的概念了。

3.那么在来说说hadoop

hadoop也是技术层面的，是云计算和大数据的一种技术实现。

hadoop目前我了解的最主要的两部分就是HDFS和mapreduce 前者负责存储和操作海量的数据，后者负责针对海量数据做出的复杂的计算。

可以这么说大数据和云计算都是概念思想，hadoop是这些思想的具体实现。

hadoop是一个软件框架，这个软件框架具有一些大数据的功能，可以实现云计算的某一部分功能。就这样。

其实对hadoop来讲 我个人更喜欢叫它操作系统，我觉着这货就是一个特殊的操作系统，能让你存储信息，查看信息，管理信息。叫系统也不为过把。无非功能单一了一些。哈哈 。