对hdfs的操作方式:hadoop fs xxx

 hadoop fs -ls  /查看hdfs的根目录下的内容的

 hadoop fs -lsr /递归查看hdfs的根目录下的内容的

 hadoop fs -mkdir /d1在hdfs上创建文件夹d1

 hadoop fs -put 把数据从linux上传到hdfs的特定路径中

 hadoop fs -get 把数据从hdfs下载到linux的特定路径下

 hadoop fs -text 查看hdfs中的文件

 hadoop fs -rm删除hdfs中文件

 hadoop fs -rmr删除hdfs中的文件夹

hadoop fs -ls hdfs://hadoop0:9000/

hadoop命令_第1张图片

2.HDFS的datanode在存储数据时,如果原始文件大小>64MB,按照64MB大小切分;如果<64MB,只有一个block,占用磁盘空间是源文件实际大小。


3.RPC(remote procedure call)

 不同java进程间的对象方法的调用。

 一方称作服务端(server),一方称作客户端(client)。

 server端提供对象,供客户端调用的,被调用的对象的方法的执行发生在server端。

RPC是hadoop框架运行的基础。

服务端提供的对象必须是一个接口,接口extends VersioinedProtocal

客户端能够的对象中的方法必须位于对象的接口中。