HDFS组成架构

HDFS组成架构_第1张图片

1、 NameNode(nn):就是Master,它是一个主管、管理者。

  • 管理HDFS的名称空间;
  • 配置副本策略;
  • 管理数据块(Block)映射信息;
  • 处理客户端读写请求。

2、 DataNode:就是slave。NameNode下达命令,DataNode执行实际的操作。

  • 储存实际的数据块;
  • 执行数据块的读写操作。

3、 Client:就是客户端

  • 文件切分:文件上传HDFS的时候,Client将文件切分为一个一个的Block,然后进行上传;
  • 与NameNode进行交互,获取文件的位置信息;
  • 与DataNode进行交互,读取或者写入数据;
  • Client提供一些命令来管理HDFS,比如NameNode的格式化;
  • Client可以通过一些命令来访问HDFS,比如对HDFS增删改查操作。

4、 Secondary NameNode:并非NameNode的热备。当NameNode挂掉的时候,它并不能马上替换NameNode并提供服务。

  • 辅助NameNode,分担其工作量,比如定期合并Fsimage和Edits,并推送给NameNode;
  • 在紧急情况下,可辅助恢复NameNode。
    注:NameNode的HA模式下没有2NN,其功能由Standby的NameNode实现。

你可能感兴趣的:(hadoop,hdfs,架构,hadoop)