Ubuntu 16.04 安装Spark-2.3.0详细步骤

安装Spark的步骤跟安装Java和Scala的步骤差不多,比较简单,在这里简单表述一下安装流程。

1、下载Spark。

方法一:

这个简单,直接在官网上找到downloads选定红色框框中的版本号就可以了。

注意:package Type大家可以选择Pre-built for Apache Hadoop 2.7 and later,

          也可以选择其他的。Spark的版本安装可以脱离Hadoop直接安装,

          当然你有Hadoop的话,就按照Hadoop的版本来安装。

Spark下载链接:Download Apache Spark

Ubuntu 16.04 安装Spark-2.3.0详细步骤_第1张图片

方法二:

首先,本人采用的是清华源下载安装的,因为直接下载限速严重。

清华大学开源软件镜像站链接:清华大学开源软件镜像站


Ubuntu 16.04 安装Spark-2.3.0详细步骤_第2张图片

进去后找到Spark,选择你想要的版本号,点击下载就好了。

Ubuntu 16.04 安装Spark-2.3.0详细步骤_第3张图片

Ubuntu 16.04 安装Spark-2.3.0详细步骤_第4张图片


2、接下来解压压缩包。

解压命令:

tar -zxvf spark-2.3.0-bin-hadoop2.7.gz


3、解压后,修改配置文件。

配置文件需要加入以下部分:

export SPARK_HOME=/home/tianao/Spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/bin



4、保存文件后,要使环境变量生效:

source /etc/profile

Ubuntu 16.04 安装Spark-2.3.0详细步骤_第5张图片

5、验证安装成功






你可能感兴趣的:(Spark)