Hadoop 3.2.1Yarn虚拟机集群启动配置

Hadoop 3.2.1Yarn虚拟机集群启动配置

主要配置2个文件

1.yarn-site.xml

这个文件位置在hadoop安装目录的etc下，我的目录如下/opt/apps/hadoop-3.2.1/etc/hadoop

<property>
<name>yarn.resourcemanager.hostnamename>
<value>doit01value>
property>


<property>
<name>yarn.nodemanager.aux-servicesname>
<value>mapreduce_shufflevalue>
property>


<property>
<name>yarn.nodemanager.resource.memory-mbname>
<value>4096value>
property>

<property>
<name>yarn.nodemanager.resource.cpu-vcoresname>
<value>4value>
property>


<property>
  <name>yarn.nodemanager.vmem-check-enabledname>
  <value>falsevalue>
property>

 
<property>
  <name>yarn.nodemanager.vmem-pmem-rationame>
  <value>2.1value>
property>

2.start-yarn.sh和stop-yarn.sh

在hadoop安装目录的sbin目录下


使用vi命令打开，vi start-yarn.sh

vi stop-yarn.sh

都配置完成后，就可以使用sbin下的这2个启动和停止脚本进行yarn的启动和停止

3.同时启动hdfs和yarn

sbin下有start-all.sh和stop-all.sh脚本，这2个脚本其实默认就会分别调用start-dfs.sh和start-yarn.sh以及stop-dfs.sh和stop-yarn.sh。

4.查看yarn的web页面

在windows浏览器中，输入http://yarn主节点ip地址:8088,效果如下