eclipse连接Hadoop配置

准备:

eclipse

hadoop完全分布式

编译得到hadoop-eclipse-plugin-2.7.7.jar

github下载:hadoop.dll          winutils.exe            

1.eclipse添加插件:

将hadoop-eclipse-plugin-2.7.7.jar放到eclipse的安装目录plugins下

2.配置hadoop的环境变量

3.添加wind下的Hadoop兼容性插件

hadoop.dll添加到C:\Windows\System32下

winutils.exe添加到hadoop安装目录bin下

4.若已经打卡eclipse,则重启

5.配置界面

   1)将Hadoop的环境变量添加到eclipse中

    windows——preference——搜Hadoop      导入hadoop安装目录

eclipse连接Hadoop配置_第1张图片
 

配置Hadoop通信:windows——show view——others得到以下界面,空白处右键新建

eclipse连接Hadoop配置_第2张图片eclipse连接Hadoop配置_第3张图片

连通后文件可见

eclipse连接Hadoop配置_第4张图片

Hadoop的hdfs的api调用:

建工程:

  1. 导入jar包,右键build path

优点:代码移动不用重新导包

缺点:jar冲突不好解决,工程过于臃肿

  1. 使用maven管理jar包

优点:jar包管理方便,解决jar包管理冲突

缺点:代码移动需要重建工程

  1. 手动建立一个jar包依赖库

 

 

你可能感兴趣的:(Hadoop,Java笔记)