案例:Shell定时采集数据至HDFS(待更新)

需求背景

周期性上传文件至HDFS

技术分析

HDFS  SHELL:  hadoop fs -put    //满足文件上传,不能满足定时,周期性传入

Linux   crontab:  crontab -e  0 0 * * * * /shell/uploadFile2Hdfs.sh      //每天凌晨12:00执行一次

实现流程

代码实现

你可能感兴趣的:(大数据,Hadoop,HDFS,Shell)