解决集群org.apache.spark.deploy.worker.Worker --webui-port 8081 spark://hadoop1:7077问题

问题出现: 

解决集群org.apache.spark.deploy.worker.Worker --webui-port 8081 spark://hadoop1:7077问题_第1张图片

出现该问题的原因在于其他集群的profile并没有设置好:

export  JAVA_HOME=/usr/java/default
export SPARK_HOME=/usr/local/spark2.4.7

export PATH=$PATH:$JAVA_HOME/bin:$SCALA_HOME/bin:$SPARK_HOME/bin:$SPARK_HOME/sbin
export HADOOP_USER_NAME=hdfs
#SCALA_HOME
#set scala
export SCALA_HOME=/usr/local/scala-2.11.12
export PATH=$PATH:$SCALA_HOME/bin
 

配置好即可启动

解决集群org.apache.spark.deploy.worker.Worker --webui-port 8081 spark://hadoop1:7077问题_第2张图片

(proce un)不碍事

你可能感兴趣的:(spark)