hadoop小知识

1、hadoop fs、hadoop dfs和hdfs dfs的区别:

(1)hadoop fs:
FS relates to a generic file system which can point to any file systems like local, HDFS etc. So this can be used when you are dealing with different file systems such as Local FS, HFTP FS, S3 FS, and others
意思是说该命令可以用于其他文件系统,不止是hdfs文件系统内,也就是说该命令的使用范围更广

(2)hadoop dfs
专门针对hdfs分布式文件系统

(3)hdfs dfs
和上面的命令作用相同,相比于上面的命令更为推荐,并且当使用hadoop dfs时内部会被转为hdfs dfs命令

2、hadoop dfs常用命令

(1)创建目录

hadoop dfs -mkdir /home

(2)上传文件或目录到hdfs

hadoop dfs -put hello /
hadoop dfs -put hellodir/ /

(3)查看目录

hadoop dfs -ls /

(4)创建一个空文件

hadoop dfs -touchz /361way

(5)删除一个文件

hadoop dfs -rm /361way

(6)删除一个目录

hadoop dfs -rmr /home

(7)重命名

hadoop dfs -mv /hello1 /hello2

(8)查看文件

hadoop dfs -cat /hello

(9)将制定目录下的所有内容merge成一个文件,下载到本地

hadoop dfs -getmerge /hellodir wa

(10)使用du文件和目录大小

hadoop dfs -du /

(11)将目录拷贝到本地

hadoop dfs -copyToLocal  /home localdir

(12)查看dfs的情况

hadoop dfsadmin -report
 

你可能感兴趣的:(Hadoop,计算机知识,hadoop,hdfs,大数据)