【Hadoop】Win7上搭建Hadoop开发环境,方法一

在Win7上,编写hadoop程序

 

操作系统:win7

hadoop版本:CDH3u6

 

1、下载安装JDK,以及Eclipse

2、新建JAVA Project

【Hadoop】Win7上搭建Hadoop开发环境,方法一_第1张图片

3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;

    选择“Java Build Path” —— “Libraries” —— Add External Jars

 【Hadoop】Win7上搭建Hadoop开发环境,方法一_第2张图片

5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包

    将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。

6、创建配置文件夹

【Hadoop】Win7上搭建Hadoop开发环境,方法一_第3张图片

7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

 【Hadoop】Win7上搭建Hadoop开发环境,方法一_第4张图片

 

【Hadoop】Win7上搭建Hadoop开发环境,方法一_第5张图片

8、右键->属性 进行如下操作,添加刚刚创建conf文件夹

 【Hadoop】Win7上搭建Hadoop开发环境,方法一_第6张图片

 

配置搞定!

写代码的过程中要写入的namenodejobtracker地址(修改为你自己的)

在你的代码中,加入如下代码就可以了

Configuration conf = new Configuration();
conf.set("fs.default.name","192.1.1.2:9000");
conf.set("mapred.job.tracker","192.1.1.2:9001");

 

去博客园浏览:http://www.cnblogs.com/laov/p/3497889.html

 

转载于:https://www.cnblogs.com/laov/p/3497889.html

你可能感兴趣的:(【Hadoop】Win7上搭建Hadoop开发环境,方法一)