spark java.lang.OutOfMemoryError: PermGen space

spark deploy在yarn cluster上,相对数据集来讲,内存绝对足够,运行时还是OutOfMemoryError。

spark-submit 时增加下面参数即可


--driver-java-options '-XX:MaxPermSize=8192M' 


你可能感兴趣的:(spark java.lang.OutOfMemoryError: PermGen space)