spark-shell启动中bug调试（bug调试）

报错信息：

Exception in thread "main" java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProtocolBufferException: Protocol message end-group tag did not match expected tag.; Host Details : local host is: "node01/192.168.198.21"; destination host is: "node01":8080;

问题描述：

启动spark-shell时报如上错误，大概看来是那个端口的问题，咋一看，还真看不出来。这是由于spark-master端口8080（后期可能有修改），和hdfs的端口：50070（状态为active），还有hdfs的状态端口8020混乱的问题。

解决思路：首先在spark中用“hdfs dfs -p mkdir  /spark/data”,创建的文件在hdfs上，故在conf下的spark-default下配置路径的时候，应该配置的是hdfs的端口，并且是active状态下的“8020”端口，而我错误地配置成了“8080”

解决方案：

去conf文件夹下，去文件spark-default下修改配置的端口：

spark.eventLog.dir               hdfs://node01:8080/spark/log