Hadoop:本地文件(window系统)定时获取文件并上传至HDFS文件(两个虚拟机)系统 Java 实现
实现功能:定时日志采集并上传至HDFS文件系统的JavaAPI实现环境+工具:windows+虚拟机Centos*2+eclipse+windows下编译的Hadoopjar包+Hadoop集群一、流程1)启动一个定时任务,规划各种路径——定时探测日志源目录(本地目录)F:/logs/get_log/;——获取需要采集的文件(文件过滤器,比如以get_log开头);——移动这些文件到一个待上传临时