使用Hadoop和Java API实现文件的读写

实验内容：使用Hadoop和Java API实现文件的读写

实验步骤：

一 .安装配置JDK+Eclipse+Maven

• 安装配置JDK

①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 

②运行安装包，第一次选择JDK安装路径，第二次选择JRE安装路径，开始安装。

③配置JDK的环境变量，Path添加JDK的\bin的安装路径，cmd命令行运行javac，查看是否成功安装配置。

 

• 安装Eclipse

①官网下载Eclipse安装包eclipse-inst-win64：https://www.eclipse.org/downloads/ 

②运行安装包，选择Eclipse IDE for Java Developers，开始安装。过程可能较慢。

 

• 安装Maven

① Maven官网http://maven.apache.org/download.cgi，选择最近的镜像，选择Maven压缩包apache-maven-3.6.0-bin.tar.gz开始下载。

②解压Maven压缩包apache-maven-3.6.0-bin.tar.gz，解压后的文件夹\apache-maven-3.6.0，将其考入自定义路径，如C:\eclipse\apache-maven-3.6.0。

③配置Maven的环境变量，Path添加Maven的\bin的安装路径，cmd命令行运行mvn -v，查看是否成功安装配置。

 

• Eclipse配置Maven

①修改settings.xml

在安装所在文件夹\apache-maven-3.6.0下面，新建\repository文件夹，作为Maven本地仓库。在文件settings.xml里添加 C:\eclipse\apache-maven-3.6.0\repository。

②配置Maven的installation和User Settings

【Preferences】→【Maven】→【Installations】配置Maven安装路径，【User Settings】配置settings.xml的路径。

③添加pom.xml依赖

依赖（Maven Repository: hadoop）所在网址：https://mvnrepository.com/tags/hadoop ，找到对应版本的三个依赖（如下），拷贝至pom.xml的与之间，保存之后自动生成Maven Dependencies。

  

      org.apache.hadoop

      hadoop-hdfs

      2.7.3

  

    

      org.apache.hadoop  

      hadoop-client  

      2.7.3  

  

  

      org.apache.hadoop

      hadoop-common

      2.7.3

  

二 .在Eclipse里新建Maven Project

在Eclipse里新建Maven Project, 输入com.bla，项目名称HDFSTest, 自动生成Maven项目，新建包hdfs.files，包里新建class：4个java文件。

三 .编程调试4个Java程序