hdfs笔记

1.HDFS shell
    1.0查看帮助
        hadoop fs -help
    1.1上传
        hadoop fs -put
    1.2查看文件内容
        hadoop fs -cat
    1.3查看文件列表
        hadoop fs -ls /
    1.4下载文件
        hadoop fs -get

2.使用java接口操作HDFS
    见eclipse工程下的demo

3.hadoop通信机制
    不同进程之间的方法进行调用

4.HDFS源码分析
    FileSystem.get --> 通过反射实例化了一个DistributedFileSystem --> new DFSCilent()把他作为自己的成员变量
    在DFSClient构造方法里面,调用了createNamenode,使用了RPC机制,得到了一个NameNode的代理对象,就可以和NameNode进行通信了
    
    FileSystem --> DistributedFileSystem --> DFSClient --> NameNode的代理
    
5.Hadoop学习资料下载

Hadoop-HDFS-Shell-学习资料及文档、Java代码

你可能感兴趣的:(大数据,hdfs,笔记,hadoop)