win7 安装hadoop2.2.0

 想了解hadoop，所以就下了最新的文件，搭建相关的环境，以下为自己在win7上搭建hadoop的相关步骤。

        1、下载hadoop，用winRAR解压。（路径不能有空格）

        2、安装java，此处就不做讲解了。（java路径不能有空格）

        3、配置hadoop的环境变量HADOOP_HOME=”HADOOP的安装目录”

        4、在环境变量的PATH中加入HADOOP的安装目录/bin

        5、修改hadoop目录下etc/hadoop/hadoop-env.cmd文件中的JAVA_HOME变量为当前java的安装路径。

        6、下载hadoop-commin-2.2.zip,因为在windows下运行，压缩包里面缺少 winutils.exe, hadoop.dll等文件，下载完成后，将要报下面的bin目录下的所有文件全部拷贝到hadoop目录下的bin文件夹下。

        7、修改配置文件，以下四个文件全部在hadoop目录下的etc/hadoop目录下

我的Hadoop解压缩目录是D:\Hadoop_2_4_0,以下简称h_home

首先，修改%h_home%\etc\hadoop的hadoop-env.cmd脚本文件，在文件末尾增加环境变量定义。注意找到文件最初的JAVA_HOME设置，改成你的64位JDK路径，这一点一定要注意！比如我的：“set  JAVA_HOME=D:\OLD_JDK\jdk1.7.0_51”：特别注意路径不能有空格，加入有空格需要用java_home = C:\PROGRA~1\Java\jdk1.5.0_14代替java_home = C:\Program Files\Java\jdk1.5.0_09 或者"%java_home%"\bin\java 或者 "C:\Program Files"\Java\jdk1.5.0_09\bin\java

 set HADOOP_PREFIX=D:\Hadoop_2_4_0
 set HADOOP_CONF_DIR=%HADOOP_PREFIX%\etc\hadoop
 set YARN_CONF_DIR=%HADOOP_CONF_DIR%
 set PATH=%PATH%;%HADOOP_PREFIX%\bin

之后在该路径下找到或创建core-site.xml文件，修改内容如下：

 <configuration>
   <property>
     <name>fs.default.name</name>
     <value>hdfs://0.0.0.0:19000</value>
   </property>
 </configuration>

接下来是 hdfs-site.xml 文件，一样的修改内容如下。配置文件默认使用\tmp目录作为hdfs文件的存储位置，比如我解压hadoop在D:\下，则它就会创建D:\tmp来存放HDFS文件系统。

 <configuration>
   <property>
     <name>dfs.replication</name>
     <value>1</value>
   </property>
 </configuration>

基本配置ok。

接下来我们配置一个YARN示例：

还是在该配置文件路径下，修改或者创建一个mapred-site.xml文件，路径下有个同名的模板文件，可以直接复制，然后修改其中的内容。注意替换配置文件中%USERNAME% 为你windows的用户名。

 <configuration>

    <property>
      <name>mapreduce.job.user.name</name>
      <value>%USERNAME%</value>
    </property>

    <property>
      <name>mapreduce.framework.name</name>
      <value>yarn</value>
    </property>

   <property>
     <name>yarn.apps.stagingDir</name>
     <value>/user/%USERNAME%/staging</value>
   </property>

   <property>
     <name>mapreduce.jobtracker.address</name>
     <value>local</value>
   </property>

 </configuration>

最后，创建yarn-site.xml文件，变更内容如下：

 <configuration>
   <property>
     <name>yarn.server.resourcemanager.address</name>
     <value>0.0.0.0:8020</value>
   </property>

   <property>
     <name>yarn.server.resourcemanager.application.expiry.interval</name>
     <value>60000</value>
   </property>

   <property>
     <name>yarn.server.nodemanager.address</name>
     <value>0.0.0.0:45454</value>
   </property>

   <property>
     <name>yarn.nodemanager.aux-services</name>
     <value>mapreduce_shuffle</value>
   </property>

   <property>
     <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
     <value>org.apache.hadoop.mapred.ShuffleHandler</value>
   </property>

   <property>
     <name>yarn.server.nodemanager.remote-app-log-dir</name>
     <value>/app-logs</value>
   </property>

   <property>
     <name>yarn.nodemanager.log-dirs</name>
     <value>/dep/logs/userlogs</value>
   </property>

   <property>
     <name>yarn.server.mapreduce-appmanager.attempt-listener.bindAddress</name>
     <value>0.0.0.0</value>
   </property>

   <property>
     <name>yarn.server.mapreduce-appmanager.client-service.bindAddress</name>
     <value>0.0.0.0</value>
   </property>

   <property>
     <name>yarn.log-aggregation-enable</name>
     <value>true</value>
   </property>

   <property>
     <name>yarn.log-aggregation.retain-seconds</name>
     <value>-1</value>
   </property>

   <property>
     <name>yarn.application.classpath</name>
     <value>%HADOOP_CONF_DIR%,%HADOOP_COMMON_HOME%/share/hadoop/common/*,%HADOOP_COMMON_HOME%/share/hadoop/common/lib/*,%HADOOP_HDFS_HOME%/share/hadoop/hdfs/*,%HADOOP_HDFS_HOME%/share/hadoop/hdfs/lib/*,%HADOOP_MAPRED_HOME%/share/hadoop/mapreduce/*,%HADOOP_MAPRED_HOME%/share/hadoop/mapreduce/lib/*,%HADOOP_YARN_HOME%/share/hadoop/yarn/*,%HADOOP_YARN_HOME%/share/hadoop/yarn/lib/*</value>
   </property>
 </configuration>

ok，全部配置都改完了。点击命令提示符（管理员）运行命令提示符，切换到hadoop的安装目录。进行以下操作

1、切换到etc/hadoop目录，运行hadoop-env.cmd脚本，设置当前命令窗口执行环境变量。

2、格式化HDFS文件系统（建议切换到bin目录然后执行命令）：

 %HADOOP_PREFIX%\bin\hdfs namenode -format

 3、运行HDFS示例：

 %HADOOP_PREFIX%\sbin\start-dfs.cmd

不报错的话，部署就ok了！！！

然后在cmd下切换目录到hadoop目录下的sbin目录下，运行start-all 会打开四个cmd窗口，可以打开浏览器输入 http://localhost:8042以及http://localhost:50070查看是否配置成功！

复制去Google翻译 翻译结果

C： \ 部署