shell 命令操作hdfs

简介

本编文章主要讲述shell 命令操作hdfs 主要讲述几个简单常用的shell 命令 如 ls get mkdir rm put 前提需要安装hdfs 作者用的是虚拟机搭建的伪分布式环境，如果没有搭建环境的可以参考这里http://www.haha174.top/article/details/251072
首先使用jps 确保 hdfs 都启动

hadoop fs * 和 hdfs dfs * 两个基本是一样的 这里主要使用
hadoop fs .
1.查看 文件系统
hadoop fs -ls /
2. 文件上传
hadoop fs -put test.txt / 将虚拟机中的test.txt 上传到hdfs 的根目录。此时我们在使用 hadoop fs -ls / 查看文件系统可以看到

3 查看内容
hadoop fs -cat /test.txt
可以看到内容输出
4 创建文件夹
hadoop fs -mkdir test
5 递归创建
hadoop fs -mkdir -p /test/a/b
6 递归展示
hadoop fs -ls -R /

7 下载 将hdfs 中的test.txt 下载到当前目录取名 get.txt
hadoop fs -get /test.txt get.txt
8 删除 文件
hadoop fs -rm /test.txt
9删除文件夹
hadoop fs -rm -R /test
总结下 大部分命令和linux 类似 相当于 hadoop fs - 加上 linux命令
文章地址： http://www.haha174.top/article/details/254272