eclipse spark源码编译部署

1.安装Scala

2.安装sbt

3.安装Scala IDE   http://scala-ide.org/download/current.html (要注意eclipse和Scala IDE的版本匹配问题,网页上有说明)

4.下载Spark源代码: Git中运行 

D:\Spark\gitCode> git clone https://github.com/apache/spark

5.启动sbt:

windows下:cmd——cd D:\Spark\gitCode\spark(源码下载地址)——sbt

Linux下:cd $spark(源码下载地址)——sbt/stb

6.生成eclipse工程文件: 在sbt提示符下输入eclipse

7.用eclipse导入生成的工程文件,并加入lib_managed目录下的jar包

你可能感兴趣的:(spark,spark源码编译)