Hadoop 文件部分命令(文件行数)

1.hdfs下载文件夹中多个文件


hadoop fs -get  /目录   目录

结果是输出到本地的文件夹之中

2.多个文件合并后输出到一个文件之中


hadoop fs -getmerge  filePath  localPath/data.dat

3.统计多个文件行数


hadoop fs -cat  /文件* | wc -l

hadoop fs -cat /datastream/portal/jinritoutiao/video/2018-08-11/portal_jinritoutiao_video_20180811*|wc -l  
查看该目录下所有文件名包含portal_jinritoutiao_video_20180811的行数

4.统计文件大小


hadoop fs -count /文件*

你可能感兴趣的:(hadoop)