win7 安装spark环境

前提条件：

jdk：java -version

scala：scala

java-1.8   scala-2.11 安装好并且配置好环境变量

官网下载spark版本

对应的hadoop下载解压

解压后启动进入spark-shell交互环境

出现找不到winutils

去https://github.com/steveloughran/winutils

下载将winutils替换到hadoop 安装目录的bin下面重新启动spark就ok

进入http://localhost:4040/jobs/就可以看到spark启动成功

 

 

以上前提条件是jdk、scala、spark、hadoop安装好、配置好环境变量并且版本要匹配。

 

参考博客：

https://blog.csdn.net/songhaifengshuaige/article/details/79480491

 

https://www.jianshu.com/p/c5190d4e8aaa