HADOOP 简介

1. Hadoop 是什么

1)Hadoop是一个有Apache的分布式系统框架,主要解决海量的数据的存储，海量的数据的分析计算

2.HADOOP 优势

1) 高可靠性:HDFS会维护多个数据副本,所以某个计算元素或存储出现故障,也不会丢数据

2)高扩展性:在集群间分配 任务数据,可方便的扩展数以千机的节点

3)高效性:HADOOP 并行工作,加快任务处理速度

4)高容错性:能够自动将失败的任务重新分配;

3.hadoop组成

4.HDFS简介 

Hadoop distributed FIle System,简称 HDFS,是一个分布式文件系统;

1) Namenode(nn):

2)DataNode(dn):

3)Seconday NameNode(2nn):

5.MapReduce 简介

MapReduce将计算过程分为两个阶段: Map和Reduce

1)Map阶段并行处理输入数据

2)Recude阶段对Map的结果进行汇总

6.yarn 简介

Yet Another Resource Negotiator简称YARN ，另一种资源协调者，是Hadoop的资源管理器。