YARN 配置、启动命令、 WEB UI 页面

  1. 报错要首先去看日志文件的报错信息
    1. hadoop-2.5.0/logs/查看具体的日志文件
    2. 查看以.log 结尾的文件
  2. 设置reduce 的获取数据的方式,yarn-site.xml

    <property>
    <name>yarn.nodemanager.aux-servicesname>
    <value>mapreduce_shufflevalue>
    property>
  3. 指定 ResourceManager 的位置:(可选项,在哪台机器上运行,默认的就
    是哪台机器) ,yarn-site.xml

    <property>
    <name>yarn.resourcemanager.hostnamename>
    <value>hadoop-senior01.ibeifeng.comvalue>
    property>

    YARN 配置、启动命令、 WEB UI 页面_第1张图片

  4. 指定 MapReduce 运行在 YARN 上,将 mapred-site.xml.template 改名为 mapred-site.xml

    <property>
    <name>mapreduce.framework.namename>
    <value>yarnvalue>
    property>

    YARN 配置、启动命令、 WEB UI 页面_第2张图片

  5. YARN 模块启动

    sbin/yarn-daemon.sh start resourcemanager
    sbin/yarn-daemon.sh start nodemanager

    YARN 配置、启动命令、 WEB UI 页面_第3张图片

  6. 通过浏览器访问:
    http://hadoop-senior01.ibeifeng.com:8088/
    YARN 配置、启动命令、 WEB UI 页面_第4张图片

你可能感兴趣的:(笔记,大数据学习)