利用 hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 Hadoop 版本 2.7.0

利用 Hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中
Hadoop 版本 2.7.0
另外说明:
远程调用机器 需要 liunx 修改 /etc/hosts 添加 10.11.12.4 master

package com.feng.test.hdfs.filesystem;

import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;

/**
 * 上传文件 远程调用机器 需要 liunx 修改 /etc/hosts 添加 10.11.12.4 master
 * 
 * @author feng
 *
 */

public class CopyFromLocalFile {

    public static void main(String[] args) {
        FileSystem hdfs = null;
        try {
            //目标文件
            String destfile = "/feng/tmp/" + System.currentTimeMillis();
            //源文件
            String fsrc = "/Users/feng/Downloads/83.txt";

            Configuration config = new Configuration();
            // 程序配置
            config.set("fs.default.name", "hdfs://master:9000");

            hdfs = FileSystem
                    .get(new URI("hdfs://master:9000"), config, "feng");
            Path srcPath = new Path(fsrc);
            Path destPath = new Path(destfile);

            // hdfs.copyFromLocalFile(srcPath, destPath);
            // delSrc whether to delete the src
            boolean delSrc = true;
            hdfs.copyFromLocalFile(delSrc, srcPath, destPath);
            System.out.println("It is over : " + destfile);
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            if (hdfs != null) {
                try {
                    hdfs.closeAll();
                } catch (Exception e) {
                    e.printStackTrace();
                }
            }
        }
    }

}

你可能感兴趣的:(Hadoop,HDFS,2.7)