hadoop简介

hadoop1.0时期架构

hadoop简介_第1张图片

hadoop2.0时期架构

hadoop简介_第2张图片

hdfs架构

hadoop简介_第3张图片

【Active Namenode】:主 Master(只有一个),管理 HDFS 的名称空间,管理数据块映射信息;配置副本策略;处理客户端读写请求

【Secondary NameNode】:NameNode 的热备;定期合并 fsimage 和 fsedits,推送给 NameNode;当 Active NameNode 出现故障时,快速切换为新的 Active NameNode。

【Datanode】:Slave(有多个);存储实际的数据块;执行数据块读 / 写

【Client】:与 NameNode 交互,获取文件位置信息;与 DataNode 交互,读取或者写入数据;管理 HDFS、访问 HDFS。

MapReduce架构

hadoop简介_第4张图片

hadoop简介_第5张图片

hadoop简介_第6张图片

hadoop简介_第7张图片

yarn架构

hadoop简介_第8张图片

hadoop1.0hadoop2.0比较图

hadoop简介_第9张图片

你可能感兴趣的:(hadoop简介)