Windows环境下安装pyspark环境常见错误及解决办法

1、 Error:java.util.NoSuchElementException: key not found: _PYSPARK_DRIVER_CALLBACK_HOST

如果刚安装pyspark环境,运行测试程序时,弹出这个错误,很有可能是你安装软件的版本不匹配导致的。
例如:
Java : jdk1.7
scala : 2.10
hadoop: 2.6
spark: spark-1.6.0-bin-hadoop2.6
pyspark:2.2.1

当我使用pyspark版本为2.4.3时,就会弹出上述错误。

2、TypeError: ‘JavaPackage’ object is not callable

Windows环境下安装pyspark环境常见错误及解决办法_第1张图片

参考:

pyspark–报错java.util.NoSuchElementException: key not found: _PYSPARK_DRIVER_CALLBACK_HOST解决

PyCharm搭建Spark开发环境 + 第一个pyspark程序

你可能感兴趣的:(spark)