Hadoop简介

1. Hadoop生态圈


1.1 单机模式

Hadoop简介_第1张图片

1.2 伪分布式模式


1.3 完全分布式模式

Hadoop简介_第2张图片


2. HDFS架构

2.1 HDFS设计目标

Hadoop简介_第3张图片


2.2 基本概念

NameNode与DataNode之间通过TCP协议进行通信。

Hadoop简介_第4张图片

2.3 HDFS架构


Hadoop简介_第5张图片

Hadoop简介_第6张图片


2.4 写数据流程

Hadoop简介_第7张图片

2.5 计数据流程




3. YARN架构

      负责资源分配和任务调度, 相当于云操作系统。

Hadoop简介_第8张图片

4. MapReduce架构

4.1 基本功能

 Hadoop简介_第9张图片


4.2 MapReduce体系统结构

Hadoop简介_第10张图片

4.3 基本概念


4.4 生命周期

Hadoop简介_第11张图片






















你可能感兴趣的:(Hadoop简介)