解决zeppelin AWS 一些问题

Zeppelin 千万不要安装0.6***版本的有问题的,spark 2.1 也是不支持的,要安装0.7.2版本,但是也有一些问题,比如使用spark 正常编程还是报错 ,大部分是 jar包 版本太低

Zeppelin的 spark jar jackson jar 提升到 最高版本 。spark 2.1.1 版本, Jackson
2.6.5包,

解决zeppelin AWS 一些问题_第1张图片
image.png

java.lang.NoClassDefFoundError: Could not initialize class org.apache.spark.rdd.RDDOperationScope$ at org.apache.spark.SparkContext.withScope(SparkContext.scala:701) at org.apache.spark.SparkContext.textFile(SparkContext.scala:819) ... 52 elided
此问题解决方法就是 提升 Jackson的 jar 版本,直接把 spark 安装根目录里的jars目录下的Jackson 相关包 copy到 Zeppelin 的根目录 lib 目录下即可
com.fasterxml.jackson.core jackson-databind 2.4.4

AWS 有的时候 使用正常的 perm 密匙还是不能登录 ,需要给密匙增加权限

down voteaccepted

The problem is having wrong mod on the file.
Easily solved by executing -
chmod 400 mykey.pem
https://stackoverflow.com/questions/8193768/trying-to-ssh-into-an-amazon-ec2-instance-permission-error

你可能感兴趣的:(解决zeppelin AWS 一些问题)