Spark伪分布安装与配置

安装过程

  1. 下载安装包:

    http://archive.apache.org/dist/spark/spark-2.3.2/

  2. 使用WinSCP将下载好的压缩包上传至ubuntu上。并进行解压。 Spark伪分布安装与配置_第1张图片

  3. 解压完成使用软连接,创建一个快捷方式。
    Spark伪分布安装与配置_第2张图片

  4. 配置环境变量

 nano ~/.bashrc

在这里插入图片描述
5. 输入以上配置代码。之后,输入命令使配置生效。

source ~/.bashrc
  1. 使用命令切换到Spark conf目录下,复制并 重命名。
    Spark伪分布安装与配置_第3张图片
    Spark伪分布安装与配置_第4张图片
    7.修改Spark-env.sh
    Spark伪分布安装与配置_第5张图片
    8.启动Spark集群
    进入到Spark按照目录下,执行sbin/目录下的启动命令
    Spark伪分布安装与配置_第6张图片
    9.执行结果如下:
    Spark伪分布安装与配置_第7张图片

10.进入浏览器地址栏输入自己的ip:8080
Spark伪分布安装与配置_第8张图片

安装完成

你可能感兴趣的:(spark,spark)