java从hdfs中下载文件到本地

hdfs 在linux 搭建好，之后启动hdfs

hdfs核心机制看可这 篇

http://www.cnblogs.com/thinkpad/p/5173705.html

接下来新建java项目 引入HDFS所需要的包，这里的jar包可以从hadoop安装包里拿

解压haddoop gz进入 hadoop-2.4.1\share\hadoop\hdfs

进入hadoop-2.4.1\share\hadoop\common

导入java项目 编写如下demo

package hdfs.zanghan;

import java.io.FileOutputStream;
import java.io.IOException;

import org.apache.commons.io.IOUtils;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;


public class HdfsUtils {

	
	public static void main(String[] args) throws IOException {
		
		//上传文件到HDFS
		Configuration conf=new Configuration();
		FileSystem fs=FileSystem.get(conf);
		Path src=new Path("hdfs://zanghan02:9000/aa.txt");
		FSDataInputStream inputStream=fs.open(src);
		FileOutputStream os=new FileOutputStream("F://aa.txt");
		IOUtils.copy(inputStream,os);
		
	}
}

首先你现在的东西在hdfs上是有的

conf配置文件从etc/hadoop/拿。

core-site.xml

hafs-site.xml

放到src目录下

运行,查看F：//aa.txt文件