Hadoop Jobhistory配置启用

Hadoop Jobhistory记录下已运行完的MapReduce作业信息并存放在指定的HDFS目录下,
默认情况下是没有启动的,需要配置完后手工启动服务。

1.修改hadoop的配置文件mapred-site.xml如下


  mapreduce.jobhistory.address
  zdh-9:10020
  MapReduce JobHistory Server IPC host:port



  mapreduce.jobhistory.webapp.address
  zdh-9:19888
  MapReduce JobHistory Server Web UI host:port



    mapreduce.jobhistory.done-dir
    /history/done



    mapreduce.jobhistory.intermediate-done-dir
    /history/done_intermediate

2.启动history-server

mr-jobhistory-daemon.sh start historyserver
停止history-server
mr-jobhistory-daemon.sh stop historyserver

3.通过浏览器访问Hadoop Jobhistory的WEBUI

http://zdh-9:19888

4.参考文章

Hadoop JobHistory
http://www.cnblogs.com/luogankun/p/4019303.html

你可能感兴趣的:(Hadoop Jobhistory配置启用)