大数据技术原理与应用 实验二HDFS文件系统操作与编程 基于java的HDFS文件操作

首先在eclipse中创建一个项目,创建项目后添加jar包,这里要注意了。如果你的hadoop是2.x的,添加以下jar包即可
(1)”/usr/local/hadoop/share/hadoop/common”目录下的hadoop-common-2.7.1.jar和haoop-nfs-2.7.1.jar;
(2)/usr/local/hadoop/share/hadoop/common/lib”目录下的所有JAR包;
(3)“/usr/local/hadoop/share/hadoop/hdfs”目录下的haoop-hdfs-2.7.1.jar和haoop-hdfs-nfs-2.7.1.jar;
(4)“/usr/local/hadoop/share/hadoop/hdfs/lib”目录下的所有JAR包。
但是如果你的hadoop是3.x的,则需要多添加一些jar包
(1)”/usr/local/hadoop/share/hadoop/common”目录下的所有JAR包;
(2)/usr/local/hadoop/share/hadoop/common/lib”目录下的所有JAR包;
(3)“/usr/local/hadoop/share/hadoop/hdfs”目录下的所有JAR包
(4)“/usr/local/hadoop/share/hadoop/hdfs/lib”目录下的所有JAR包。
否则在运行一些代码的时候会报错。

(1)向HDFS上传任意文本文件,如果指定的文件在HDFS中已经存在,由用户指定是追加到原有文件末尾还是覆盖原有的文件;
(2)从HDFS中下载指定文件,如果本地文件与要下载的文件名称相同,则自动对下载的文件重命名;
这个博客有一二题的详细步骤
(3)将HDFS中指定文件的内容输出到终端中;
(4)显示HDFS中指定的文件的读写权限、大小、创建时间、路径等信息;
(5)给定HDFS中某一个目录,输出该目录下的所有文件的读写权限、大小、创建时间、路径等信息,如果该文件是目录,则递归输出该目录下所有文件相关信息;
(6)提供一个HDFS内的文件的路径,对该文件进行创建和删除操作。如果文件所在目录不存在,则自动创建目录;
(7)在HDFS中,将文件从源路径移动到目的路径
这个博客包含了3到7的代码

你可能感兴趣的:(hadoop学习)