部署hadoop集群ha模式常见的问题，以及解决方案

1.      集群中的某个datanode无法启动。

原因：可能是该节点的clusterId和master上的不一样了，修改clusterId和master一样的就行了。如下：

在core-site.xml中找到配置的hadoop.tmp.dir，往下找/dfs/name/current下有个VERSION文件，打开如下：

对比master上的clusterID，修改为mater上的ID就行了。

2.      格式化hdfs的时候出错

出现了No Route to Host from  ***** to****等信息，首先要保证各个节点配置额ssh免密码登录，然后看看是否关闭了某个节点的防火墙，本人遇见过一次，就是某个节点的防火墙忘记了关闭。

3.      JAVA_HOME is not set and javacould not be found in PATH.

启动在一台机器上启动其他机器上的zookeeper的时候，出现上面错误,但是单台一个一个启动的时候没有问题，肯定是JAVA_HOME的原因，要在zookeeper的bin目录下面的zkCli.sh文件中加上JAVA_HOME=”**/**/”然后就能启动了

4.      两个namenode都是standby状态，并且没法自动切换。出现Operation category JOURNAL is not supported in state standby错误

首先要在hdfs-site.xml中配置zookeeper的地址，如下：

       ha.zookeeper.quorum

        node1:2181,node2:2181,node3:2181

    

下面要确保ha自动切换可用。

 

       dfs.ha.automatic-failover.enabled

        true

    

然后最重要的是要格式化一下zkfc，不然zkfc启动不了。

hdfs zkfc –formatZK

5.   name无法自动切换的问题

   

       dfs.ha.fencing.methods

       shell(/bin/true)

    

网上好多教程是说这个值要配成sshfence，但是就是不能自动切换，原因参考：

https://blog.csdn.net/oneinmore/article/details/45250417

这个值改成shell(/bin/true)就可以了。

6. nodeManger启动不起来，出现如下错误 Cannot support recovery with an ephemeral server port  

解决方案如下，在yarn-site.xml中添加属性信息

 
      yarn.nodemanager.address
      ${yarn.nodemanager.hostname}:45454:45454