BigDL安装配置流程

BigDL安装配置流程

BigDL安装配置官方教程：
https://github.com/intel-analytics/BigDL/wiki/Build-Page

从零开始安装BigDL需要以下这些步骤：

步骤1：安装配置Java

1.只需安装jdk，jdk1.8.x下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index-jsp-138363.html#javasejdk

2.下载后解压jdk包  
tar -xzf packageName.tar.gz
unzip packageName.zip -d /localPath

3.解压后设置环境变量

export JAVA_HOME=/localPath
export PATH=$JAVA_HOME/bin:$PATH

步骤2: 安装配置scala （Tips:scala-2.10.x 对应spark1.5.x/1.6.x，scala-2.11对应spark2.x）

1.下载安装包，http://www.scala-lang.org/download/2.10.5.html

2.解压参考步骤1

3.设置环境变量

export SCALA_HOME=/localPath
export PATH=$SCALA_HOME/bin:$PATH

步骤3: 安装配置spark

1.下载安装包，http://spark.apache.org/downloads.html

2.解压参考步骤1

3.设置环境变量

export SPARK_HOME=/localPath
export PATH=$SPARK_HOME/bin:$PATH

4.配置spark
    1，进入Spark的配置文件路径，#cd $SPARK_HOME/conf 
    2，执行，#cp spark-env.sh.template spark-env.sh 
    3，在spark-env.sh文件中添加如下配置：

export JAVA_HOME=/安装路径
export SCALA_HOME=/安装路径

步骤4: 安装配置maven

1.下载安装https://maven.apache.org/download.cgi

2.解压参考步骤1

3.配置环境变量
export PATH=/解压路径/apache-maven-3.5.0/bin:$PATH

export MAVEN_OPTS="-Xmx2g -XX:ReservedCodeCacheSize=512m”
When compiling with Java 7, you need to add the option “-XX:MaxPermSize=1G”.

步骤5: 安装配置BigDL

1.下载BigDL，git clone https://github.com/intel-analytics/BigDL.git

2.build BigDL命令：bash make-dist.sh

可能遇到的问题：

1.bash make-dist.sh 出现error的话，看是否Downloading某个文件的时候出问题，如果是的话，可以自己下载以后，bash make-dist.sh -f filename

2.build以后生成的dist如果不能跑示例程序的话，再下一个dist
 url  https://github.com/intel-analytics/BigDL/wiki/Downloads