IntelliJ IDEA搭建GraphX环境

开始的下载 IDEA,然后安装 scala 插件,新建 sbt 项目的步骤我就略过了,重点说说引入 spark 的方法。

首先打开 build.sbt 文件,然后在文件中加入下面两行内容

libraryDependencies += "org.apache.spark" %% "spark-core" % "2.3.0"
libraryDependencies += "org.apache.spark" %% "spark-graphx" % "2.3.0"

多亏了 sbt,我们在引入第三方类库的时候一点难度也没有。不过有个需要注意的地方: spark-corespark-graphx 的版本需要和 scalaSDK 对应。我当时下的 SDK 是 2.12.x,然后下载 spark-* 的时候报找不到依赖项的错,最后在对比了 maven 上的版本才发现自己版本用高了。重新下个 2.11.x 的 SDK 就好了。

你可能感兴趣的:(IntelliJ IDEA搭建GraphX环境)