hdfs test 命令

有时候需要写一个脚本测试hdfs中的某个文件或者目录是否存在,比如当接收机发现磁盘分区剩余空间已经到了危险值的时候,需要首先测试一下是否日志已经存入HDFS目录,如果是,则可以删除接收机上的本地日志文件,避免磁盘满的事故。

下面是hdfs2.0的test命令介绍:

hdfs dfs -help
-test -[defsz] :  Answer various questions about , with result via exit status.
                  -d  return 0 if  is a directory.
                  -e  return 0 if  exists.
                  -f  return 0 if  is a file.
                  -s  return 0 if file  is greater than zero bytes in size.
                  -z  return 0 if file  is zero bytes in size.
                else, return 1.

注意,上面的这些test flag参数是互斥的,每次只能使用一个。


下面是调用示例:

测试路径是否存在

# hdfs dfs -test -e /data/mv/mvreport/201410/20141019/117-121-54-107-20141019-0000.seq
# echo $?
0
bash中用$?获取最近一次调用的返回值。

还可以用-s 和 -z参数,

如果文件尺寸大于0,则-s 返回0, 否则返回1

如果文件尺寸为0,则-z返回0,否则返回1





你可能感兴趣的:(#,Hadoop)