Windows运行Spark所需的Hadoop安装

解压文件

Windows运行Spark所需的Hadoop安装_第1张图片

 复制bin目录

        找到winutils-master文件hadoop对应的bin目录版本

Windows运行Spark所需的Hadoop安装_第2张图片

        全部复制替换掉hadoop的bin目录文件

Windows运行Spark所需的Hadoop安装_第3张图片

 复制hadoop.dll文件

        将bin目录下的hadoop.dll文件复制到System32目录下

Windows运行Spark所需的Hadoop安装_第4张图片

 Windows运行Spark所需的Hadoop安装_第5张图片

 配置环境变量

Windows运行Spark所需的Hadoop安装_第6张图片

Windows运行Spark所需的Hadoop安装_第7张图片

 修改hadoop-env.cmd配置文件

Windows运行Spark所需的Hadoop安装_第8张图片

Windows运行Spark所需的Hadoop安装_第9张图片

注意jdk装在非C盘则完全没问题,如果装在C盘则需要用路径替代符:\PROGRA~1\

如 :C:\PROGRA~1\Java\jdk1.8.0_162

测试安装成功

在cmd中查看安装成功

Windows运行Spark所需的Hadoop安装_第10张图片

你可能感兴趣的:(hadoop,spark,hadoop,大数据)