Hadoop Windows环境下安装

打包好的已配置好的hadoop  我这里用的是2.6.5 其中包括重要的几个dll文件是hadoop不自带的。

链接：https://pan.baidu.com/s/1Mct3sLTyXFuO3G8slafrKA 密码：4sf1

配置到环境变：

环境变量HADOOP_HOME中是安装的路径，在PATH里加上%HADOOP_HOME%\bin；下载相关工具类，直接解压后把文件丢到E:\hadoop-2.6.5\bin目录中去，将其中的hadoop.dll在c:/windows/System32下也丢一份；

用记事本打开 hadoop2.6.5\etc\hadoop\hadoop-env.cmd文件，修改JAVA_HOME为你自己jdk路径。注意：如果你的JDK安装在Program Files目录下，名称用\PROGRA~1\Java 否则中间的空格可能会识别失败。

windows下安装并启动hadoop2.6.5

　　64位windows安装hadoop没必要倒腾Cygwin，直接解压官网下载hadoop安装包到本地->最小化配置4个基本文件->执行1条启动命令->完事。一个前提是你的电脑上已经安装了jdk，设置了java环境变量。下面把这几步细化贴出来，以hadoop2.6.5为例


　　1、下载hadoop安装包就不细说了：http://hadoop.apache.org/->左边点Releases->点mirror site->点http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common->下载hadoop-2.6.5.tar.gz；

　　2、解压也不细说了：复制到E盘根目录直接解压，出来一个目录E:\hadoop-2.6.5

       3、去E:\hadoop-2.6.5\etc\hadoop找到下面4个文件并按如下最小配置粘贴上去：

core-site.xml

<configuration>
    <property>
        <name>fs.defaultFSname>
        <value>hdfs://localhost:9000value>
    property>
configuration>

hdfs-site.xml

<configuration>
    <property>
        <name>dfs.replicationname>
        <value>1value>
    property>
    <property>
        <name>dfs.namenode.name.dirname>
        <value>file:/hadoop/data/dfs/namenodevalue>
    property>
    <property>
        <name>dfs.datanode.data.dirname>
        <value>file:/hadoop/data/dfs/datanodevalue>
    property>
configuration>

mapred-site.xml

<configuration>
    <property>
        <name>mapreduce.framework.namename>
        <value>yarnvalue>
    property>
configuration>

yarn-site.xml

<configuration>
    <property>
        <name>yarn.nodemanager.aux-servicesname>
        <value>mapreduce_shufflevalue>
    property>
    <property>
        <name>yarn.nodemanager.aux-services.mapreduce.shuffle.classname>
        <value>org.apache.hadoop.mapred.ShuffleHandlervalue>
    property>
configuration>

4、启动windows命令行窗口，进入hadoop-2.6.5\bin目录，执行下面2条命令，先格式化namenode再启动hadoop



E:\hadoop-2.6.5\bin>hadoop namenode -format




E:\hadoop-2.6.5\bin>cd ..\sbin


E:\hadoop-2.6.5\sbin>start-all.cmd
This script is Deprecated. Instead use start-dfs.cmd and start-yarn.cmd
starting yarn daemons


E:\hadoop-2.6.5\sbin>jps
4944 DataNode
5860 NodeManager
3532 Jps
7852 NameNode
7932 ResourceManager