在Win7上,编写hadoop程序
操作系统:win7
hadoop版本:CDH3u6
1、下载安装JDK,以及Eclipse
具体看此链接:http://blog.csdn.net/weixuehao/article/details/17715793
2、新建JAVA Project
3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录
4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;
选择“Java Build Path” —— “Libraries” —— Add External Jars
5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包
将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。
6、创建配置文件夹
7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。
8、右键->属性 进行如下操作,添加刚刚创建conf文件夹
配置搞定!
写代码的过程中要写入的namenode和jobtracker地址(修改为你自己的)
在你的代码中,加入如下代码就可以了
Configuration conf = new Configuration(); conf.set("fs.default.name","192.1.1.2:9000"); conf.set("mapred.job.tracker","192.1.1.2:9001");
去博客园浏览:http://www.cnblogs.com/laov/p/3497889.html
去CSDN浏览:http://blog.csdn.net/weixuehao/article/details/17717103