MapReduce起步之搭建高可用（HA）ResourceManager

在上一篇文章从零开始搭建HDFS高可用（HA）环境（使用QJM)我们搭建了高可用的HDFS系统，接下来我们开始搭建Hadoop中的另外一个强大的组件—–MapReduceV2(或者说YARN)。
高可用YARN的搭建比搭建HDFS简单多了。架构如下：

1、我们要先安装好Zookpeer集群，这部分内容在从零开始搭建HDFS高可用（HA）环境（使用QJM)已经介绍。
2、配置hadoop配置文件中的yarn-site.xml文件：

<property>
   <name>yarn.resourcemanager.ha.enabledname>
   <value>truevalue>
 property>
 <property>
   <name>yarn.resourcemanager.cluster-idname>
   <value>cluster1value>#这个ID号不能与当前存在的ID号相同
 property>
 <property>
   <name>yarn.resourcemanager.ha.rm-idsname>
   <value>rm1,rm2value>
 property>
 <property>
   <name>yarn.resourcemanager.hostname.rm1name>
   <value>node1value>#选择node1和node2为ResourceManager
 property>
 <property>
   <name>yarn.resourcemanager.hostname.rm2name>
   <value>node2value>
 property>
 <property>
   <name>yarn.resourcemanager.zk-addressname>
   <value>node8:2181,node9:2181,node10:2181value>#选择对应的zk机器
 property>
 <property>
    <name>yarn.nodemanager.aux-servicesname>
    <value>mapreduce_shufflevalue>
 property>

3、配置mapred-site.xml文件（这个文件只有mapred-site.xml.template，重命名一下就好了）:

<property>
  <name>mapreduce.framework.namename>
  <value>yarnvalue>#将mapreduce执行在yarn中
property>

将配置文件拷贝到其他机器上就行了。

我们可以发现备用的resourcemanager没有自动启动，我们要在node2上手动启动。使用命令yarn-daemon.sh start resourcemanager

现在我们可以通过8088端口查看resourcemanager的监控页面：

如果我们访问备用resourcemanager会重定向到活跃状态的RM上。

现在我们使node1上的RM（active状态）挂掉，看看ZK能否帮我们自动切换：

自动切换成功：