Spark大数据处理学习笔记1.1 搭建Scala开发环境

文章目录

  • 一、学习目标
  • 二、scala简介
    • (一)Scala概述
    • (二)函数式编程
  • 三、windows上安装scala
    • (一)到Scala官网下载Scala
    • (二)安装Scala
    • (三)配置Scala环境变量
  • 四、Linux上安装scala
    • (一)下载都是一样的
    • (二)安装Scala
    • (三)配置Scala环境变量
  • 五、scala的使用
    • (一)交互模式
    • (二)编译模式
      • 1、创建源程序
      • 2、编译成字节码
      • 3、解释执行对象

一、学习目标

1.了解Scala语言的特点
2.学会搭建Scala开发环境
3.了解命令行模式与编译模式

二、scala简介

(一)Scala概述

  • Scala是Scalable Language的简写,是一门多范式的编程语言,由联邦理工学院洛桑(EPFL)的Martin Odersky于2001年基于Funnel的工作开始设计,设计初衷是要集成面向对象编程和函数式编程的各种特性。
  • Scala是一种将面向对象和函数式编程结合在一起的高级语言,旨在以简洁、优雅和类型安全的方式表达通用编程模式。Scala功能强大,不仅可以编写简单脚本,还可以构建大型系统。
  • Scala运行于Java平台,Scala程序会通过JVM被编译成class字节码文件,然后在操作系统上运行。其运行时候的性能通常与Java程序不分上下,并且Scala代码可以调用Java方法、继承Java类、实现Java接口等,几乎所有Scala代码都大量使用了Java类库。
  • Scala 是完全兼容Java的,其实Scala就是在Java语言的基础上增加了一层编码的 “壳”,让程序人员可以通过函数式编程的方式来开发程序。由于Scala最终被编译为.class,所以其实本质上还是Java,所以在Scala中可以任意的调用Java的API。好处显而易见:让Jva程序员可以更无障碍的转到Scala;让原先Java的API仍然可以在Scala中使用;公司中的Java平台不用替换就可以使用Scala。

(二)函数式编程

  • 函数式编程:将所有复杂的问题的解决,拆分为若干函数的处理。每一个函数可以去实现一部分功能,利用很多次函数的处理,最终解决问题。

  • 函数式编程相对于面向对象编程,更加抽象,好处是,代码可以非常简洁,更多采用常量而不是变量来解决问题,这样额外带来的好处:在线程并发时,可以减少甚至杜绝多线程并发安全问题,特别适合于应用在处理高并发场景、分布式场景下的问题。函数式编程可以使用高阶函数,函数是一等公民,可以更加灵活的进行程序的编写。

  • 函数式编程并不是面向对象编程的发展,而是另外一种解决问题的思路,两者之间也并没有绝对的好坏之分,在不同的场景中各有各的优缺点。

三、windows上安装scala

(一)到Scala官网下载Scala

  • Scala2.13.10下载网址:https://www.scala-lang.org/download/2.13.10.html
    Spark大数据处理学习笔记1.1 搭建Scala开发环境_第1张图片
    Spark大数据处理学习笔记1.1 搭建Scala开发环境_第2张图片

(二)安装Scala

(三)配置Scala环境变量

Spark大数据处理学习笔记1.1 搭建Scala开发环境_第3张图片

四、Linux上安装scala

(一)下载都是一样的

(二)安装Scala

  • 利用FinalShell登录ied虚拟机
    Spark大数据处理学习笔记1.1 搭建Scala开发环境_第4张图片
  • 上传scala安装包到ied虚拟机
    Spark大数据处理学习笔记1.1 搭建Scala开发环境_第5张图片
  • 解压scala安装包到指定目录
    在这里插入图片描述

(三)配置Scala环境变量

Spark大数据处理学习笔记1.1 搭建Scala开发环境_第6张图片

export SCALA_HOME=/usr/local/scala-2.13.10
export PATH=$SCALA_HOME/bin:$PATH

  • 存盘退出后,执行命令:source /etc/profile,让环境配置生效

五、scala的使用

(一)交互模式

  • 在命令行下直接敲命令或通过命令直接执行程序文件
    Spark大数据处理学习笔记1.1 搭建Scala开发环境_第7张图片

(二)编译模式

1、创建源程序

Spark大数据处理学习笔记1.1 搭建Scala开发环境_第8张图片
Spark大数据处理学习笔记1.1 搭建Scala开发环境_第9张图片

2、编译成字节码

Spark大数据处理学习笔记1.1 搭建Scala开发环境_第10张图片

3、解释执行对象

Spark大数据处理学习笔记1.1 搭建Scala开发环境_第11张图片

你可能感兴趣的:(Spark大数据处理,scala,spark,学习)