Win10下安装spark踩坑实录

配置spark之前,需要有jdk8,Hadoop环境

目录

    • 配置spark之前,需要有jdk8,Hadoop环境
    • 一.安装IDE
    • 二.安装scala
      • step1:下载
      • step2:配置环境
      • step3:测试
    • 三.安装Spark
      • step1:添加环境变量
      • step2:复制winutils.exe
        • 问题1:
        • 问题2:
        • 问题3:
        • 问题4:
        • 问题5:
      • step3:测试
    • 四.在eclipse中运行第一个spark程序
    • 参考文档

一.安装IDE

http://scala-ide.org/download/sdk.html

版本号最好对应上

也有scala的插件,但是不建议这样装

直接解压下载好的安装包

二.安装scala

step1:下载

https://www.scala-lang.org/download/2.12.3.html

msi和zip都可以

zip直接就是源码,下载解压之后就可以啦

msi有一个安装引导助手,如下图:

双击scala-2.11.8.msi安装包,启动安装程序,

点击next

中间会有一步选择安装位置的,这里要注意,路径里不要用空格,不要有空格,不要有空格

step2:配置环境

①系统变量里增加一项:

你可能感兴趣的:(大数据学习,spark,scala,hadoop)