6.hdfs的存储过程

1.hdfs 怎么存储

切割存储

2. 为何每块是128m

与io读写速度有关，一般人的接受速度1s中，而磁盘的读写速度为100m／s，在读取文件时候需要硬盘寻找地址，一般读懂速度和寻找之间的比例是1/100，比如我们设置寻址时间为10ms，那么整体读的时间为10ms * 100 = 1000ms = 1s， 100m／s * 1／s～=128M

3. 验证存储

4. 怎么分割存储

block0 Size大小为134217728
block1 Size大小为79874467
合并为214092195

5. 验证合并

#cp blk_1073741840 /root/  
#cp blk_1073741841 /root/
#cat blk_1073741841 >> blk_1073741840
#mv blk_1073741840 hadoop_blk.tar.gz
#tar xf hadoop_blk.tar.gz

转载于:https://www.cnblogs.com/liu-yao/p/6hdfs-de-cun-chu-guo-cheng.html