Windows系统Hadoop下载安装

Windows系统Hadoop下载安装

    • Hadoop下载
    • Hadoop安装
    • Hadoop环境配置
    • Hadoop服务启动

Hadoop下载

官网下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/

  1. 请求官网下载地址,点击 hadoop-2.7.7 链接
    Windows系统Hadoop下载安装_第1张图片
  2. 点击 hadoop-2.7.7.tar.gz 链接
    Windows系统Hadoop下载安装_第2张图片
  3. 点击下载按钮进行下载
    Windows系统Hadoop下载安装_第3张图片

Hadoop安装

  1. 解压 hadoop-2.7.7.tar.gz
    Windows系统Hadoop下载安装_第4张图片
  2. 解压 hadooponwindows-master.zip
    Windows系统Hadoop下载安装_第5张图片
  3. 使用hadooponwindows-master的bin和etc替换hadoop2.7.7的bin和etc

hadooponwindows-master.zip的下载地址:https://pan.baidu.com/s/1vxtBxJyu7HNmOhsdjLZkYw
提取码:y9a4

注意:官网下载Hadoop2.7.7,安装时注意,最好不要安装到带有空格的路径名下,例如:Programe Files,否则在配置Hadoop的配置文件时会找不到JDK(按相关说法,配置文件中的路径加引号即可解决,但我没测试成功)。

Hadoop环境配置

  1. 安装JDK,设置环境变量。
  2. 配置HADOOP_HOME
    Windows系统Hadoop下载安装_第6张图片
    path添加%HADOOP_HOME%in(win10不用分号或者如下编辑界面不用分号,其余加上;)
    Windows系统Hadoop下载安装_第7张图片
  3. Hadoop中配置JDK。
    (1) 使用编辑器打开D: uanjianhadoop-2.7.7etchadoophadoop-env.cmd
    (2) 修改JAVA_HOME的路径
    把set JAVA_HOME改为jdk的位置
    注意其中PROGRA~1代表Program Files
    set JAVA_HOME=E:PROGRA~1Javajdk1.8.0_171
    此处设置的JDK如下图:
    Windows系统Hadoop下载安装_第8张图片
  4. 在D: uanjianhadoop-2.7.7目录下,添加tmp文件夹
    Windows系统Hadoop下载安装_第9张图片
  5. 在D: uanjianhadoop-2.7.7目录下,添加data和namenode,datanode子文件夹
    Windows系统Hadoop下载安装_第10张图片
  6. 打开 D: uanjianhadoop-2.7.7etchadoophdfs-site.xml, 修改路径为hadoop下的namenode和datanode
    Windows系统Hadoop下载安装_第11张图片
  7. 把hadoop.dll 从D: uanjianhadoop-2.7.7in拷贝到 C:WindowsSystem32
    Windows系统Hadoop下载安装_第12张图片
    Windows系统Hadoop下载安装_第13张图片
    不然在window平台使用MapReduce测试时报错

Hadoop服务启动

  1. 以管理员身份打开命令提示符,输入hdfs namenode -format,看到seccessfully就说明format成功
    Windows系统Hadoop下载安装_第14张图片
    Windows系统Hadoop下载安装_第15张图片
  2. 进入D: uanjianhadoop-2.7.7sbin目录下,执行 start-all 命令,启动hadoop集群。
    Windows系统Hadoop下载安装_第16张图片
  3. 出现下面四个窗口表示启动hadoop集群成功
    Windows系统Hadoop下载安装_第17张图片
    Windows系统Hadoop下载安装_第18张图片
    Windows系统Hadoop下载安装_第19张图片
    Windows系统Hadoop下载安装_第20张图片
  4. 输入jps - 可以查看运行的所有节点
    Windows系统Hadoop下载安装_第21张图片
  5. 访问http://localhost:50070,访问hadoop的web界面
    Windows系统Hadoop下载安装_第22张图片
  6. 访问http://localhost:8088,访问yarn的web界面,有就表明已经成功
    Windows系统Hadoop下载安装_第23张图片
  7. 执行stop-all,停止运行所有的节点
    Windows系统Hadoop下载安装_第24张图片

你可能感兴趣的:(java,java,后端)