HDFS读写流程 元数据机制图文详解

client向HDFS写数据流程(图)

HDFS读写流程 元数据机制图文详解_第1张图片

client从HDFS读数据流程(图)
---------------------------------------HDFS读写流程 元数据机制图文详解_第2张图片
namenode元数据管理机制(图)

HDFS读写流程 元数据机制图文详解_第3张图片

fsimage 镜像文件:是元数据的一个持久化的检查点,包含 Hadoop 文件系统中的所有目录和文件元数据信息,但不包含文件块位置的信息。文件块位置信息只存储在内存中,是在 datanode 加入集群的时候,namenode 询问 datanode 得到的,并且间断的更新。
  Edits 编辑日志:存放的是 Hadoop 文件系统的所有更改操作(文件创建,删除或修改)的日志,文件系统客户端执行的更改操作首先会被记录到 edits 文件中。

你可能感兴趣的:(hadoop,大数据,hdfs,大数据,hdfs,hadoop,读写流程)