Hadoop对于读流程和写流程的图解和解释

Hadoop的读流程和写流程究竟是怎么回事呢?
看下面:

一、读流程
 Hadoop对于读流程和写流程的图解和解释_第1张图片
解释:
1、客户端向NameNode发起请求,需要获取名字为x的数据块 
2、NameNode中保存了该数据块存储的位置,将DataNode的信息返回给客户端 
3、客户端就近的方式去从DataNode获取数据 
4、如果某个DataNode无法访问 
5、从另一个DataNode中去获取数据 


总结:向namenode发送请求,从它获得该数据块存储的信息,信息返回给客户端
          从而获取数据

二、写流程
Hadoop对于读流程和写流程的图解和解释_第2张图片



解释:
1、客户端向NameNode发起请求,需要存储数据Data 
2、因为NameNode中是记录了所有DataNode的相关信息的,而数据最终要保存的地方就是DataNode,所以NameNode会返回可用的             DataNode的信息给客户端 
3、将Data分为1和2这两个数据块 
4、客户端会将数据块存储到NameNode返回给他的DataNode1中去 
5、因为数据块需要存储多份,所以DataNode之间会相互传输来进行存储 
6、DataNode存储完数据后,会反馈给NameNode,NameNode会将对应的DataNode的相关信息进行更新 


总结:
            客户端向namenode发送请求,namenode返回可用的datanode信息给客户端,
            客户端会将数据块存储导datanode,并备份,然后datanode存储完数据会反馈给namenode。




 

你可能感兴趣的:(Hadoop)