Hadoop|启动yarn及在yarn上运行mapreduce

YARN on Single Node

修改yarn环境配置文件yarn-env.sh

Hadoop|启动yarn及在yarn上运行mapreduce_第1张图片
image.png

修改yarn配置文件yarn-site.xml

Hadoop|启动yarn及在yarn上运行mapreduce_第2张图片
image.png

配置yarn服务地址及HDFS地址

Hadoop|启动yarn及在yarn上运行mapreduce_第3张图片

Hadoop|启动yarn及在yarn上运行mapreduce_第4张图片
image.png

启动yarn的resourcemanager和nodemanager节点

命令:sbin/yarn-daemon.sh start resourcemanager
sbin/yarn-daemon.sh start nodemanager

Hadoop|启动yarn及在yarn上运行mapreduce_第5张图片
image.png

查看yarn服务器web页面端口为8088

Hadoop|启动yarn及在yarn上运行mapreduce_第6张图片
image.png

修改配置文件mapred-env.sh

Hadoop|启动yarn及在yarn上运行mapreduce_第7张图片
image.png

重新命名mapred-site.xml.template

Hadoop|启动yarn及在yarn上运行mapreduce_第8张图片
image.png

在mapred-site.xml文件中添加yarn值,表示在yarn上运行

Hadoop|启动yarn及在yarn上运行mapreduce_第9张图片
image.png

运行yarn前删除输出目录,要不会报错

bin/hdfs dfs -rm -R /user/beifeng/mapreduce/wordcount/output

image.png

运行mapReduce程序


Hadoop|启动yarn及在yarn上运行mapreduce_第10张图片
Hadoop|启动yarn及在yarn上运行mapreduce_第11张图片
Hadoop|启动yarn及在yarn上运行mapreduce_第12张图片

你可能感兴趣的:(Hadoop|启动yarn及在yarn上运行mapreduce)