什么是大数据概念

  现在说起大数据,那是相当火的“时髦词”,大家在炒概念,大数据并不难,怎样利用大数据还是很难得,在我看来,目前很多人都在吹嘘大数据。但是真正懂大数据的人却寥寥无几,下面我们来聊聊大数据概念:

  大数据(big data),简单来说就是巨量数据集合(IT行业术语),百度百科词条的解释是这样的:指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产,

  在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中是这样定义大数据的:指不用随机分析法(抽样调查)这样的捷径,而采用所有数据进行分析处理。大数据的5V特点(IBM提出):Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)Veracity(真实性)。

  大数据是需要更新模式才能具有更强大的决策力,洞察发现力和流程优化能力来适应海量,高增长和多样化的信息资产。大数据有以下几点内涵吧:

  1. 数据量大,TB,PB,乃至EB等数据量的数据需要分析处理。

  2. 要求快速响应,市场变化快,要求能及时快速的响应变化,对数据的分析也要快,在性能上有更高要求,所以数据量显得对速度要求有些“大”。

  3. 数据多样性:不同的数据源,非结构化数据越来越多,需要进行清洗,整理,筛选等操作,变为结构数据。

  4. 价值密度低,由于数据采集的不及时,数据样本不全面,数据可能不连续等等,数据可能会失真,但当数据量达到一定规模,可以通过更多的数据达到更真实全面的反馈。

  现在的社会是一个快速发展的时代,科技发达,信息流通,人们之家的交流越来越密切呢,生活也是越来越方便,大数据就是这个高科技时代的产物;很多行业都会有大数据需求,譬如电信行业,互联网行业等等容易产生大量数据的行业,很多传统行业,譬如医药,教育,采矿,电力等等任何行业,都会有大数据需求。大数据与各个行业的深度融会,将发生出前所未有的社会和商业价值。

  马云曾说过,未来时代将不是IT时代,而是DT(Data Technology数据科技)的时代,显示大数据对于阿里巴巴企业来说举足轻重。

  这是本人理解的大数据概念, 如果有不对的地方,希望谅解,也希望你们多多补充,让我们感受和期待大数据未来的发展

  本文出自柠檬派(http://www.lemonpai.com/1419.html 在Apache Hive中轻松生存的12个技巧 )转载请务必保留此出处 ,否则将追究法律责任!

你可能感兴趣的:(大数据,大数据应用,大数据概念)